(57)【要約】【課題】利便性の高いマルチディスプレイシステムを実現する。【解決手段】リアル画面を表示する情報端末と、リアル画面とは異なる拡張現実の表示画面である仮想画面を表示する拡張現実表示装置を備えるマルチディスプレイシステムにおいて、拡張現実表示装置は、情報端末により表示された前記リアル画面の位置範囲を検出すると共に、検出した前記リアル画面の位置範囲と、前記仮想画面の位置範囲とが重ならないように、仮想画面の表示位置を制御する。【選択図】図４
2014174507.tif 000002
【特許請求の範囲】
【請求項１】
情報端末の表示画面であるリアル画面とは異なる表示画面となる仮想画面を表示する拡張現実表示装置であって、
前記リアル画面の位置範囲を検出するリアル画面位置検出部と、
前記リアル画面位置検出部により検出された前記位置範囲と、前記仮想画面の位置範囲とが重ならないように、前記仮想画面の表示位置を制御する制御部とを備えることを特徴とする拡張現実表示装置。
【請求項２】
前記情報端末と通信をする通信部をさらに備え、
前記制御部は、
さらに、前記通信部により受信した前記情報端末からの情報に応じて、前記仮想画面の表示内容および／または表示方式を制御することを特徴とする請求項１に記載の拡張現実表示装置。
【請求項３】
ユーザの頭部に装着して使用されるものであり、
前記リアル画面位置検出部は、
前記拡張現実表示装置を装着したユーザの視線と同一の方向に向く撮像部と、
前記撮像部により撮像された画像を解析することにより、前記リアル画面の位置範囲を判別する画像解析部とを備えることを特徴とする請求項１または２に記載の拡張現実表示装置。
【請求項４】
前記画像解析部は、さらに、前記撮像部により撮像された画像における、前記リアル画面以外の部分の複雑度を解析し、
前記制御部は、前記画像解析部により得られた前記複雑度が最も小さい位置範囲に表示されるように、前記仮想画面の表示位置を制御することを特徴とする請求項３に記載の拡張現実表示装置。
【請求項５】
前記画像解析部は、
前記リアル画面の所定の位置に表示された、または、前記リアル画面の外枠を規定する筐体部の所定の位置に設けられた所定のマークを、前記撮像部により撮像された画像から検出することにより、前記リアル画面の位置範囲を判別することを特徴とする請求項３または４に記載の拡張現実表示装置。
【請求項６】
前記所定のマークは、前記リアル画面のサイズを示しうる情報が含まれていることを特徴とする請求項５に記載の拡張現実表示装置。
【請求項７】
前記所定のマークは、バーコードまたはＱＲコード（登録商標）（ＱＲ：Ｑｕｉｃｋ  Ｒｅｓｐｏｎｓｅ）であることを特徴とする請求項６に記載の拡張現実表示装置。
【請求項８】
表示部を備える情報端末と、
前記情報端末の前記表示部の表示画面であるリアル画面とは異なる表示画面となる仮想画面を表示する拡張現実表示装置とを有するマルチディスプレイシステムであって、
前記拡張現実表示装置は、
前記リアル画面の位置範囲を検出するリアル画面位置検出部と、
前記リアル画面位置検出部により検出された前記位置範囲と、前記仮想画面の位置範囲とが重ならないように、前記仮想画面の表示位置を制御する制御部とを備えることを特徴とするマルチディスプレイシステム。
【請求項９】
前記情報端末と前記拡張現実表示装置は、互いに通信可能であり、
前記情報端末は、
入力部を備え、
該入力部により入力された情報が前記拡張現実表示装置への情報であるときに、該情報を前記拡張現実表示装置に送信し、
前記拡張現実表示装置の前記制御部は、
前記情報端末から受信した情報に応じて、前記仮想画面の表示内容を制御することを特徴とする請求項８に記載のマルチディスプレイシステム。
【請求項１０】
表示部と、
前記表示部による表示画面であるリアル画面とは別の拡張現実の表示画面となる仮想画面を表示する拡張現実表示装置に、前記リアル画面の位置範囲を検出させることが可能なリアル画面位置情報を提示するリアル画面位置提示部とを備えることを特徴とする情報端末。
【請求項１１】
入力部と、
前記拡張現実表示装置と通信をする通信部とをさらに備え、
前記入力部により入力された情報が前記拡張現実表示装置への情報であるときに、前記通信部を介して前記情報を前記拡張現実表示装置に送信することを特徴とする請求項１０に記載の情報端末。
【請求項１２】
前記リアル画面位置提示部は、前記リアル画面位置情報として、前記リアル画面の所定の位置に所定のマークを表示させることを特徴とする請求項１０または１１に記載の情報端末。
【請求項１３】
前記所定のマークは、前記リアル画面のサイズを示しうる情報が含まれていることを特徴とする請求項１２に記載の拡張現実表示装置。
【請求項１４】
前記所定のマークは、バーコードまたはＱＲコード（登録商標）（ＱＲ：Ｑｕｉｃｋ  Ｒｅｓｐｏｎｓｅ）であることを特徴とする請求項１３に記載の拡張現実表示装置。
【請求項１５】
情報端末の表示画面であるリアル画面とは異なる表示画面となる仮想画面を表示する際に、
前記リアル画面の位置範囲を検出し、
検出された前記位置範囲と、前記仮想画面の位置範囲とが重ならないように、前記仮想画面の表示位置を制御する処理をコンピュータに実行せしめることを特徴とするプログラム。
【請求項１６】
さらに、前記情報端末から受信した情報に応じて、前記仮想画面の表示内容を制御する処理をコンピュータに実行せしめることを特徴とする請求項１５に記載のプログラム。
【請求項１７】
コンピュータの表示部に表示をさせ、
前記表示部による表示画面であるリアル画面とは異なる表示画面となる仮想画面を表示する拡張現実表示装置に、前記リアル画面の位置範囲を検出させることが可能なリアル画面位置情報を提示する処理を前記コンピュータに実行せしめることを特徴とするプログラム。
【請求項１８】
さらに、前記コンピュータの入力部により入力された情報が前記拡張現実表示装置への情報であるときに、前記情報を前記拡張現実表示装置に送信する処理を前記コンピュータに実行せしめることを特徴とする請求項１７に記載のプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、拡張現実表示によりマルチディスプレイシステムを実現する技術に関する。
【背景技術】
【０００２】
複数の表示装置に夫々異なる内容を表示させる所謂マルチディスプレイシステムが様々な場面で利用されている。
【０００３】
例えば、２つのディスプレイを接続したコンピュータにより構成されたマルチディスプレイシステムの片方のディスプレイに英語の文章を表示させると共に、表示された該英語の文書のうちの、ユーザがマウスやタッチペンなどにより指定した箇所の日本語訳を他方のディスプレイに表示するような利用形態が知られている。
【０００４】
このようなシステムの場合、人が知覚する現実環境として、２つのディスプレイの表示画面である。
【０００５】
近年、人が知覚する現実環境をコンピュータにより拡張する所謂拡張現実（ＡＲ：Ａｕｇｍｅｎｔｅｄ  Ｒｅａｌｉｔｙ）技術が発展しつつあり、様々な分野で利用されている。以下において、現実環境の表示画面を「リアル画面」といい、拡張現実の表示画面を「仮想画面」という。
【０００６】
例えば、特許文献１には、拡張現実の表示画面（特許文献１における「仮想空間表示画面」）の一部をユーザが装着する表示器に表示し、ユーザの頭の動きに応じて該表示器に表示させる部分を移動するようにした表示システムにおいて、表示器に表示させる部分を移動させる際に、該表示器に表示させる部分が仮想空間表示画面の一方の末端から他方の末端に移って該他方の末端から仮想空間表示画面に移動するように制御する。この技術は、上述したようなシステムにおいて、拡張現実表示を行う表示器が一度に全表示内容（仮想空間表示画面）の一部しか表示できない場合に、表示器の表示部分を見ながら仮想空間表示画面上の所望の位置の探査を容易にするためのものである。
【０００７】
また、ゲームのプレイ画面（リアル画面）に表示されているキャラクタがポインティングされたときに、リアル画面における該キャラクタの近傍に、拡張現実表示技術により該キャラクタの名前や属性などを仮想画面としてリアル画面に重ねて表示するシステムも知られている。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特開２００１−３３７６４５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００９】
マルチディスプレイシステムを全て現実環境で実現する場合には、複数の表示装置分の物理空間を確保する必要があり、不便である。特に、移動することを前提としたタブレット端末などの場合、自身に備えられたタッチパネル以外に他の表示装置を接続するのでは、重さの問題に加え、移動時に不便である。
【００１０】
そこで、マルチディスプレイシステムにより表示される複数の表示画面のうちの１つ以上の表示画面を拡張現実表示技術により仮想画面で表示することが考えられる。しかし、マルチディスプレイシステムを全て現実環境で実現する場合には、全ての表示画面が物理的に存在する表示装置に表示されたリアル画面であるため、これらの表示画面が互いに重なることが無い。対して、マルチディスプレイシステムにより表示される複数の画像のうちの１つ以上の表示画面を仮想画面で表示する場合には、リアル画面と仮想画面が重なってしまう可能性があり、ユーザにとって不便となることがある。この問題も、マルチディスプレイシステムに、移動することを前提としたタブレット端末が含まれる場合において、特に顕著である。
【００１１】
本発明は、上記事情に鑑みてなされたものであり、利便性の高いマルチディスプレイシステムを実現する技術を提供する。
【課題を解決するための手段】
【００１２】
本発明の１つの態様は、情報端末の表示画面（リアル画面）とは別の拡張現実の表示画面（仮想画面）を表示する拡張現実表示装置である。該拡張現実表示装置は、リアル画面位置検出部と、制御部とを備える。
【００１３】
前記リアル画面位置検出部は、前記リアル画面の位置範囲を検出し、前記制御部は、前記リアル画面位置検出部により検出された前記位置範囲と、前記仮想画面の位置範囲とが重ならないように、前記仮想画面の表示位置を制御する。
【００１４】
本発明の別の態様は、情報端末である。該情報端末は、表示部と、リアル画面位置提示部とを備える。
【００１５】
前記リアル画面位置提示部は、前記表示部による表示画面（リアル画面）とは別の拡張現実の表示画面（仮想画面）を表示する拡張現実表示装置に、前記リアル画面の位置範囲を検出させることが可能なリアル画面位置情報を提示する。
【００１６】
なお、上記態様の拡張現実表示装置及び情報端末を方法に置換えて表示したものや、該拡張現実表示装置または情報端末を備えたシステムや、該拡張現実表示装置または情報端末による処理をコンピュータに実行せしめるプログラムや、これらのプログラムを記憶した記録媒体なども、本発明の態様としては有効である。
【発明の効果】
【００１７】
本発明にかかる技術によれば、利便性の高いマルチディスプレイシステムを実現することができる。
【図面の簡単な説明】
【００１８】
【図１】第１の実施の形態にかかるマルチディスプレイシステムを示す図である。
【図２】図１に示すマルチディスプレイシステムにおける拡張現実表示装置を示す図である。
【図３】図２に示す拡張現実表示装置におけるリアル画面位置検出部を示す図である。
【図４】図１に示すマルチディスプレイシステムにより表示されたリアル画面と仮想画面の位置関係の例を示す図である（その１）。
【図５】図１に示すマルチディスプレイシステムにより表示されたリアル画面と仮想画面の位置関係の例を示す図である（その２）。
【図６】図１に示すマルチディスプレイシステムにより表示されたリアル画面と仮想画面の位置関係の例を示す図である（その３）。
【図７】図１に示すマルチディスプレイシステムにより表示されたリアル画面と仮想画面の位置関係の例を示す図である（その４）。
【図８】図１に示すマルチディスプレイシステムにより表示されたリアル画面と仮想画面の位置関係の例を示す図である（その５）。
【図９】第２の実施の形態にかかるマルチディスプレイシステムを示す図である。
【発明を実施するための形態】
【００１９】
以下、図面を参照して本発明の実施の形態について説明する。説明の明確化のため、以下の記載及び図面は、適宜、省略、及び簡略化がなされている。また、様々な処理を行う機能ブロックとして図面に記載される各要素は、ハードウェアとソフトウェア（プログラム）の組合せによっていろいろな形で実現できることは当業者には理解されるところであり、ハードウェアとソフトウェアのいずれかに限定されるものではない。なお、各図面において、同一の要素には同一の符号が付されており、必要に応じて重複説明は省略されている。
【００２０】
また、上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ  ｃｏｍｐｕｔｅｒ  ｒｅａｄａｂｌｅ  ｍｅｄｉｕｍ）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（ｔａｎｇｉｂｌｅ  ｓｔｏｒａｇｅ  ｍｅｄｉｕｍ）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ−ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Ｐｒｏｇｒａｍｍａｂｌｅ  ＲＯＭ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ  ＰＲＯＭ）、フラッシュＲＯＭ、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（ｔｒａｎｓｉｔｏｒｙ  ｃｏｍｐｕｔｅｒ  ｒｅａｄａｂｌｅ  ｍｅｄｉｕｍ）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
【００２１】
＜第１の実施の形態＞
図１は、本発明の第１の実施の形態にかかるマルチディスプレイシステム１００を示す。マルチディスプレイシステム１００は、情報端末１１０と拡張現実表示装置２００を備える。
【００２２】
本実施の形態において、一例として、情報端末１１０は、タブレット端末であり、タッチパネル１２０と筐体１３０を備える。筐体１３０には、マーク１４０が設けられている。また、タブレット端末１１０は、例えば無線通信機能を有し、拡張現実表示装置２００と無線通信が可能である。
【００２３】
マーク１４０は、拡張現実表示装置２００に、自身がＡＲ機器に対応可能であることを示すものであり、例えば、通常知られているＡＲマーカーである。本実施の形態において、マーク１４０は、タッチパネル１２０との位置関係が決まっていると共に、その模様が、タッチパネル１２０による表示画面（リアル画面）のサイズを示す情報が含まれている。
【００２４】
タブレット端末１１０は、タッチパネル１２０を介して、指やタッチペンなどの入力手段からの入力を受け付ける。本実施の形態において、タブレット端末１１０は、上述した入力手段から入力された情報が自身への情報なのか、拡張現実表示装置２００への情報を判別することができると共に、入力された情報が拡張現実表示装置２００への情報であると判別したときに、該情報を拡張現実表示装置２００に送信する。
【００２５】
タブレット端末１１０自身への情報か、拡張現実表示装置２００への情報かは、具体的には、例えば、１本指により入力された情報がタブレット端末１１０への情報であり、２本指により入力された情報が拡張現実表示装置２００への情報であるように判別することができる。
【００２６】
または、タッチパネル１２０の所定の位置範囲を予め設定しておき、該範囲内の入力により入力された情報が拡張現実表示装置２００への情報であるように判別するようにしてもよい。この場合、タッチパネル１２０の表示画面への影響を少なくするために、上記所定の位置範囲を、タッチパネル１２０の４隅のいずれか１つのできるだけ小さい範囲とすることが好ましい。
【００２７】
図２は、拡張現実表示装置２００を示す。拡張現実表示装置２００は、拡張現実の画面（仮想画面）を表示するものであり、例えば、ユーザの頭部に装着して使用される。図２に示すように、拡張現実表示装置２００は、通信部２１０、リアル画面位置検出部２２０、制御部２３０、仮想画面表示部２４０を備える。
【００２８】
通信部２１０は、無線によりタブレット端末１１０との通信を担う機能ブロックであり、タブレット端末１１０から情報を受信した場合に、該情報を制御部２３０に転送する。
【００２９】
リアル画面位置検出部２２０は、タブレット端末１１０のタッチパネル１２０による表示画面（リアル画面）の位置範囲を検出して制御部２３０に供する。リアル画面位置検出部２２０の構成例、及びリアル画面位置検出部２２０によるリアル画面の位置範囲の具体的な検出手法例については、後述する。
【００３０】
制御部２３０は、リアル画面位置検出部２２０により検出されたリアル画面の位置範囲に応じて、リアル画面の位置範囲と仮想画面の位置範囲とが重ならないように、仮想画面表示部２４０に仮想画面の表示位置を指示する。仮想画面表示部２４０は、制御部２３０により指示された表示位置に仮想画面を表示する。
【００３１】
本実施の形態において、制御部２３０は、さらに、通信部２１０が受信したタブレット端末１１０からの情報に基づいて、仮想画面表示部２４０に表示させる表示内容を制御する。
【００３２】
例えば、タブレット端末１１０からの情報が、表示用データと指示用データの２種類が考えられる。制御部２３０は、表示用データの場合には、該表示用データを仮想画面表示部２４０に転送して表示させる。
【００３３】
指示用データは、例えばスクロール指示や、拡大／縮小指示を示すものが考えられる。これらの指示用データの場合、制御部２３０は、該指示用データが示す指示通りの表示内容または表示方式で仮想画面を表示するように仮想画面表示部２４０を制御する。
【００３４】
図３は、リアル画面位置検出部２２０の構成例を示す図である。該例では、リアル画面位置検出部２２０は、撮像部２２２と画像解析部２２４を備える。
【００３５】
撮像部２２２は、拡張現実表示装置２００を装着したユーザの視線と同一の方向に向くカメラである。ユーザは、リアル画面と仮想画面の両方が表示されるようにしたいときに、拡張現実表示装置２００を装着すると共に、視線がタブレット端末１１０に向いていると考えられる。そのため、撮像部２２２も、タブレット端末１１０に向いており、それにより撮像した画像には、タブレット端末１１０の画像が含まれることとなる。
【００３６】
画像解析部２２４は、撮像部２２２により撮像した画像を解析することにより、タブレット端末１１０のタッチパネル１２０により表示されたリアル画面の位置範囲を判別する。
【００３７】
本実施の形態において、画像解析部２２４は、具体的には、まず、撮像部２２２により撮像した画像からマーク１４０を検出してマーク１４０の位置を特定する。次に、画像解析部２２４は、マーク１４０の位置とタッチパネル１２０の位置関係、及び、マーク１４０の模様が示すタッチパネル１２０の表示画面（リアル画面）のサイズとに基づいて、リアル画面の位置範囲を算出する。
【００３８】
具体例を参照しながら、マルチディスプレイシステム１００における処理の流れを時系列に説明する。
【００３９】
まず、ユーザは、マルチディスプレイシステム１００を構成するために、拡張現実表示装置２００を装着すると共に、拡張現実表示装置２００をオンさせる。そして、タブレット端末１１０を見るように頭部の向きを調整する。
【００４０】
拡張現実表示装置２００のオンに応じて、撮像部２２２は、撮像を開始する。画像解析部２２４は、撮像部２２２により取得した画像に対して、マーク１４０の検出を行う。マーク１４０を検出すると、画像解析部２２４は、その位置を特定すると共に、その模様により示されるリアル画面のサイズを判別して、制御部２３０に通知する。
【００４１】
制御部２３０は、画像解析部２２４からマーク１４０が検出されたことを通知されると、通信部２１０を介して、タブレット端末１１０にペアリングの要求を送信する。
【００４２】
タブレット端末１１０は、拡張現実表示装置２００からペアリングの要求を受信すると、拡張現実表示装置２００との通信を許可するシーケンスを実行すると共に、ペアリングの完了を示す信号を拡張現実表示装置２００に返答する。
【００４３】
これにより、タブレット端末１１０と拡張現実表示装置２００は、互いに通信可能となる。
【００４４】
ここで、ユーザが、タッチパネル１２０を介して１本指により指示を入力し、タブレット端末１１０にインストールされたブラウジングソフトウェアを起動して、英語のホームページの閲覧を開始したとする。このホームページは、「日本語訳を並行に表示する」ボタンが設けられており、該ボタンを押下することにより、日本語訳のデータもタブレット端末１１０に送信されるとする。
【００４５】
ユーザが閲覧中に上記ボタンを押下したとき、タブレット端末１１０は、該ホームページを表示するサーバ装置から送信されてきた日本語訳のデータを拡張現実表示装置２００に転送する。
【００４６】
拡張現実表示装置２００では、タブレット端末１１０から上記日本語訳のデータを受信すると、制御部２３０は、該日本語訳のデータを、例えば先頭から仮想画面表示部２４０に表示させる。
【００４７】
その後、ユーザが１本指によりタッチパネル１２０を操作して、英語のホームページをスクロールさせたとする。これに応じて、タブレット端末１１０は、同様のスクロール指示を拡張現実表示装置２００に送信する。
【００４８】
拡張現実表示装置２００の制御部２３０は、該スクロール指示に従って、仮想画面の表示内容もスクロールさせるように仮想画面表示部２４０を制御する。
【００４９】
次に、ユーザが日本語訳の一部分を拡大してみたいため、２本指でタッチパネル１２０に対して拡大指示をする。タブレット端末１１０は、この指示が拡張現実表示装置２００への指示であると判別し、タッチパネル１２０により表示されているリアル画面の拡大をせずに、該指示を拡張現実表示装置２００に送信する。
【００５０】
リアル画面位置検出部２２０の制御部２３０は、タブレット端末１１０からの拡大指示に応じて、仮想画面上で拡大表示するよう仮想画面表示部２４０を制御する。
【００５１】
タブレット端末１１０によるリアル画面と、拡張現実表示装置２００による仮想画面の位置関係の例を説明する。
【００５２】
図４〜図７は、仮想画面をリアル画面の右側、左側、上方、下方に表示した例を夫々示す。リアル画面と仮想画面の位置範囲が重ならなければ、仮想画面とリアル画面の位置関係は、限定されることが無い。
【００５３】
なお、例えば、拡張現実表示装置２００がユーザからの入力を直接受け付けることが可能な場合には、この入力の方式に応じて仮想画面とリアル画面の位置関係を一定にすることが好ましい。
【００５４】
例えば、拡張現実表示装置２００は、タッチパネル１２０乃至リアル画面までの距離を測定し、タッチパネル１２０上の指の動きをタブレット端末１１０への入力として理解する一方、タッチパネル１２０とユーザの間の指の動きを自身への指示として理解するようにすることができる。こうした場合においては、誤理解が無いように、仮想画面を常にリアル画面の上方に表示することが好ましい。
【００５５】
また、拡張現実表示装置２００は、用途に応じて、１つのリアル画面に対して複数の仮想画面を表示するようにしてもよい。図８には、リアル画面の上方と右側に夫々１つずつ仮想画面が表示された例を示す。勿論、仮想画面のサイズも、限定されることが無い。
【００５６】
さらに、タブレット端末１１０とユーザ間の位置関係に応じて、ユーザが見やすいように、仮想画面とリアル画面の位置関係を調整してもよい。また、ユーザによるタブレット端末１１０を振る操作を検出すると、リアル画面と仮想画面と表示内容を変更したり、切り替えたり、位置関係を変更するように処理させても良い。例えば、タブレット端末１１０を右方向に振る操作をタブレット端末１１０が検出した場合、リアル画面に対して左方向に表示されていた仮想画面が右方向に表示されるように切り替えても良いし、リアル画面に表示されている表示内容を仮想画面に表示させるようにして、仮想画面に表示されている表示内容をリアル画面に表示させるようにしても良い。このためには、タブレット端末１１０に振動を検出するセンサや振動の方向を検出するセンサを備えていると良い。
【００５７】
例えば、拡張現実表示装置２００は、ユーザがタブレット端末１１０の真正面に向いているか否かを検出する手段を持ち、ユーザがタブレット端末１１０の真正面に向いている場合には、図４に示すように、仮想画面をリアル画面の右側に表示する。しかし、ユーザがタブレット端末１１０を自身の右側に移動した場合には、相変わらず仮想画面をリアル画面の右側に表示するのでは、ユーザが見にくくなってしまう。この場合、拡張現実表示装置２００は、図５に示すように、仮想画面がリアル画面の左側になるように、仮想画面の表示位置を変更することが好ましい。
【００５８】
本実施の形態のマルチディスプレイシステム１００によれば、拡張現実表示装置２００は、リアル画面位置検出部２２０を備えることにより、リアル画面の位置範囲を判定することができ、リアル画面と仮想画面の位置範囲が重ならないように表示させることができる。そのため、タッチパネル１２０以外に、リアル画面を表示する他の表示装置を設ける必要が無く、軽量、かつ省空間のマルチディスプレイシステムを実現することができる。
【００５９】
さらに、タブレット端末１１０が移動しても、拡張現実表示装置２００側でリアル画面の表示位置を追従させることができるため、利便性が高い。
【００６０】
また、タブレット端末１１０と拡張現実表示装置２００間で通信可能であるため、リアル画面と仮想画面を連動させることが可能であると共に、タブレット端末１１０を介して拡張現実表示装置２００を操作することができる。
【００６１】
＜第２の実施の形態＞
第１の実施の形態にかかるマルチディスプレイシステム１００では、タブレット端末１１０と拡張現実表示装置２００のペアリング、及び拡張現実表示装置２００によるリアル画面の位置範囲の検出は、共に、ＡＲマーカーであるマーク１４０が使用されている。ペアリング用のマークと、リアル画面の位置範囲の検出用のマークとを、別々のマークを使用してもよい。これについての例を、本第２の実施の形態を用いて説明する。
【００６２】
図９は、第２の実施の形態にかかるマルチディスプレイシステム３００を示す。マルチディスプレイシステム３００は、互いに通信可能なタブレット端末３１０と拡張現実表示装置４００を備える。
【００６３】
タブレット端末３１０は、タブレット端末１１０と同様に、タッチパネル１２０、筐体１３０を備え、筐体１３０には、ペアリング用のＡＲマーカーであるマーク１４０が設けられている。さらに、タブレット端末３１０は、拡張現実表示装置４００に、タッチパネル１２０による表示画面（リアル画面）の位置範囲を検出させることが可能なリアル画面位置情報を提示するリアル画面位置提示部３５０を備える。
【００６４】
拡張現実表示装置４００は、リアル画面の位置範囲の検出に、マーク１４０の代わりに、リアル画面位置提示部３５０により提示されたリアル画面位置情報を用いる点を除き、マルチディスプレイシステム１００における拡張現実表示装置２００と同様である。
【００６５】
タブレット端末３１０のリアル画面位置提示部３５０は、タブレット端末３１０と拡張現実表示装置４００のペアリングが完了した後に、タッチパネル１２０上に、リアル画面位置情報としてマーク３４０を表示する。このマーク３４０は、タッチパネル１２０上での表示位置が一定であり、その模様により、タッチパネル１２０のサイズを示すことができる。マーク３４０は、例えば、ＱＲコード（登録商標）（ＱＲ：Ｑｕｉｃｋ  Ｒｅｓｐｏｎｓｅ）である。
【００６６】
拡張現実表示装置４００は、仮想画面の表示に際して、撮像した画像からＱＲコード３４０を検出し、リアル画面の位置範囲を特定する。前述したように、この点を除き、拡張現実表示装置４００は、マルチディスプレイシステム１００における拡張現実表示装置２００と同様である。
【００６７】
本第２の実施の形態にかかるマルチディスプレイシステム３００は、第１の実施の形態にかかるマルチディスプレイシステム１００と同様の効果を得ることができる。
【００６８】
以上、実施の形態をもとに本発明を説明した。実施の形態は例示であり、本発明の主旨から逸脱しない限り、上述した各実施の形態に対してさまざまな変更、増減、組合せを行ってもよい。これらの変更、増減、組合せが行われた変形例も本発明の範囲にあることは、当業者に理解されるところである。
【００６９】
例えば、マルチディスプレイシステム３００において、マーク１４０を用いずに、タブレット端末３１０と拡張現実表示装置４００のペアリングにも、ＱＲコード３４０を用いるようにしてもよい。
【００７０】
また、上述の実施の形態に限定されず、マーク１４０やＱＲコード３４０を用いない方法でもよい。例えば、リアル画面が表示している所定のマークや枠を検出した場合に、タブレット端末が拡張現実表示装置とのペアリングを開始するようにしてもよい。
【００７１】
また、ＱＲコード３４０の代わりにバーコードを用いてもよい。
さらに、ＱＲコード３４０の代わりに、タッチパネル１２０の表示画面の外縁に沿った枠を表示するようにしてもよい。この場合、拡張現実表示装置側は、上記枠の位置を検出して、該枠を含む、該枠により囲まれた範囲をリアル画面の位置範囲として判定すればよい。
【００７２】
勿論、タッチパネル１２０に表示させる代わりに、上記枠を、タッチパネル１２０の外枠を規定する筐体の部分に設けるようにしてもよい。
【符号の説明】
【００７３】
１００  マルチディスプレイシステム
１１０  タブレット端末
１２０  タッチパネル
１３０  筐体
１４０  マーク
２００  拡張現実表示装置
２１０  通信部
２２０  リアル画面位置検出部
２２２  撮像部
２２４  画像解析部
２３０  制御部
２４０  仮想画面表示部
３００  マルチディスプレイシステム
３１０  タブレット端末
３４０  ＱＲコード
３５０  リアル画面位置提示部
４００  拡張現実表示装置
【図１】
2014174507.tif 000003
【図２】
2014174507.tif 000004
【図３】
2014174507.tif 000005
【図４】
2014174507.tif 000006
【図５】
2014174507.tif 000007
【図６】
2014174507.tif 000008
【図７】
2014174507.tif 000009
【図８】
2014174507.tif 000010
【図９】
2014174507.tif 000011