(57)【要約】      （修正有）【課題】端末表示装置を主表示装置の拡張表示領域として接続している状態で、その表示座標を簡単に検出すると同時に画面調整を行い、且つ端末表示装置と主表示装置の各記憶部にアクセス可能として、情報共有を速やかに行う。【解決手段】表示システムは、主表示部１２に画像を表示する主表示装置１０と、主表示装置に隣接あるいは重ねて配置し通信接続して端末表示部２２に画像を表示可能な端末表示装置２０とを備える。主表示装置は、端末表示装置と通信接続する第１通信部１５と、主表示部と端末表示部のうち少なくとも主表示部には、移動可能な位置合わせマークを表示させてユーザに端末表示装置の配置位置を指定させ、主表示部に画像を表示する制御を行うとともに、配置位置に基づく端末表示部の表示画像を生成して通信部を介して端末表示装置に送り主表示部の表示画像を送る主制御部１１と、を備える。【選択図】図４
2016057674.tif 000002
【特許請求の範囲】
【請求項１】
主表示部に画像を表示する主表示装置と、該主表示装置に隣接あるいは重ねて配置し通信接続して端末表示部に画像を表示可能な端末表示装置とを備える表示システムにおいて、
前記主表示装置は、
前記端末表示装置と通信接続する通信部と、
前記主表示部と前記端末表示部のうち少なくとも前記主表示部には、移動可能な位置合わせマークを表示させてユーザに前記端末表示装置の配置位置を指定させ、前記主表示部に画像を表示する制御を行うとともに、前記配置位置に基づく前記端末表示部の表示画像を生成して、前記通信部を介して前記端末表示装置に送り前記主表示部の表示画像を送る主制御部と、
を備え、
前記端末表示装置は、
前記主表示装置と通信接続する端末通信部と、
前記端末通信部を介して前記主表示装置から送られた表示画像を前記端末表示部に表示する端末制御部と、
を備えることを特徴とする表示システム。
【請求項２】
前記主表示装置と前記端末表示装置との通信接続には近接無線通信を使うことを特徴とする請求項１に記載の表示システム。
【請求項３】
前記端末表示装置の端末制御部は、通信接続したときに、前記通信部を介して前記端末表示部の画面情報を前記主表示装置に送り、
前記主表示装置の主制御部は、前記画面情報に基づいて、前記端末表示部の画面設定を前記主表示部の画面設定に合わせるように前記通信部を介して画面設定の指示を出し、
前記端末表示装置の端末制御部は、前記指示に従って画面設定を行うことを特徴とする請求項１又は２に記載の表示システム。
【請求項４】
前記端末表示装置の端末制御部は、通信接続したときに、前記通信部を介して前記端末表示部の画面情報を前記主表示装置に送り、
前記主表示装置の主制御部は、前記画面情報に基づいて、前記端末表示部の画面設定を前記主表示部の画面設定とは異なるように前記通信部を介して指示を出し、
前記端末表示装置の端末制御部は、前記指示に従って画面設定を行うことを特徴とする請求項１又は２に記載の表示システム。
【請求項５】
前記位置合わせマークは矢印であり、
前記主表示装置の主制御部は、前記位置合わせマークを前記主表示装置と前記端末表示装置に表示させることを特徴とする請求項１から４のいずれかに記載の表示システム。
【請求項６】
前記位置合わせマークは、前記端末表示装置のサイズに該当する枠線であり、
前記主表示装置の主制御部は、前記位置合わせマークを前記主表示装置に表示させることを特徴とする請求項１から４のいずれかに記載の表示システム。
【請求項７】
前記端末表示装置は、
画像データを記憶する記憶部を備え、
前記端末制御部は、前記主表示装置からの画像データを前記記憶部に記憶させ、前記主表示装置との通信接続が切れた場合には、前記記憶部の画像データを表示することを特徴とする請求項１から６のいずれかに記載の表示システム。
【請求項８】
前記主表示装置の主制御部は、前記主表示部と前記端末表示部にそれぞれの装置のローカルストレージにアクセスできるアイコンを表示し、該アイコンに対する操作に基づいて前記ローカルストレージにアクセス可能とすることを特徴とする請求項１から７のいずれかに記載の表示システム。
【請求項９】
画像を表示する主表示部を備え、隣接あるいは重ねて配置された端末表示装置に、通信接続して端末表示部に画像を表示可能な主表示装置において、
前記端末表示装置と通信接続する通信部と、
前記主表示部と前記端末表示部のうち少なくとも前記主表示部には、移動可能な位置合わせマークを表示させてユーザに前記端末表示装置の配置位置を指定させ、前記主表示部に画像を表示する制御を行うとともに、前記配置位置に基づく前記端末表示部の表示画像を生成して、前記通信部を介して前記端末表示装置に送り前記主表示部の表示画像を送る主制御部と、
を備え、
前記端末表示装置が、送られた表示画像を前記端末表示部に表示することを特徴とする主表示装置。
【請求項１０】
主表示部に画像を表示する主表示装置に隣接あるいは重ねて配置し通信接続して端末表示部に画像を表示可能な端末表示装置において、
前記主表示装置と通信接続する端末通信部と、
前記端末通信部を介して前記主表示装置から送られた表示画像を前記端末表示部に表示する端末制御部と、
を備え、
前記端末制御部は、
前記主表示装置が、前記主表示部と前記端末表示部のうち少なくとも前記主表示部には、移動可能な位置合わせマークを表示させてユーザに前記端末表示装置の配置位置を指定させ、前記主表示部に画像を表示する制御を行うとともに、前記配置位置に基づく前記端末表示部の表示画像を生成して、前記端末表示装置と通信接続する通信部を介して前記主表示部の表示画像を送った場合に、送られた表示画像を前記端末表示部に表示することを特徴とする端末表示装置。
【請求項１１】
主表示部に画像を表示する主表示装置と、該主表示装置に隣接あるいは重ねて配置し通信接続して端末表示部に画像を表示可能な端末表示装置とを用いる表示方法において、
前記主表示装置が、前記主表示部と前記端末表示部のうち少なくとも前記主表示部には、移動可能な位置合わせマークを表示させてユーザに端末表示装置の配置位置を指定させ、前記主表示部に画像を表示する制御を行うとともに、前記配置位置に基づく前記端末表示部の表示画像を生成して、前記端末表示装置と通信接続する通信部を介して前記端末表示装置に送り前記主表示部の表示画像を送るステップと、
前記端末表示装置が、前記主表示装置と通信接続する端末通信部を介して前記主表示装置から送られた表示画像を前記端末表示部に表示するステップと、
を備えることを特徴とする表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、テーブルディスプレイなどの主表示装置に、タブレットＰＣなどのポータブルデバイスである端末表示装置を配置して拡張表示領域などとして機能させる表示システム、主表示装置、端末表示装置及び表示方法に関する。
【背景技術】
【０００２】
近年、会議参加者がタブレットＰＣ等のポータブルデバイスを会議に持ち込み、ポータブルデバイスに保存した各自のローカルファイル等ローカルリソースにアクセスして参加者で情報共有するというワークスタイルができつつある。そのため会議室に一台の会議用ディスプレイを設置し、各自のデバイスからの情報を会議用ディスプレイに表示することで情報が速やかに共有できる。
【０００３】
このような職場環境であれば、会議用ディスプレイを会議室に水平に設置して「テーブルディスプレイ」とし、テーブルディスプレイで十分な表示領域が無いと感じられた場合も、各自のデバイスをテーブルディスプレイの拡張表示領域として利用できれば更に効率的に情報共有できる。
【０００４】
このような複数のディスプレイ装置やタブレットを組み合わせてより広い表示領域とする装置は従来開示されている。
【０００５】
例えば、特許文献１には、「タブレットの載置位置を座標検出して、マルチ画面化したときに表示位置が適切な画像を表示する」（図２２，２３）、「複数のタッチディスプレイの隣接ポイントをそれぞれマークすることで表示位置合わせを行う」（図２９，３０）ことが記載されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開平０９−８１４７５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら各自のデバイスを拡張表示領域とした場合、タブレットＰＣなどの各自のデバイスはあくまでもテーブルディスプレイの拡張表示部として機能してはいるが、その配置位置を検出する装置によって求めた置検出から表示画像を抽出していた。このような検出装置を用いることなく、より簡単に配置位置を求めての表示画像を抽出する手段が求められていた。
【０００８】
また、デーブルディスプレイと各自のデバイスの画面のサイズ、ドット数、色数などの条件が異なっており、そのまま画像を表示すると、それぞれで画像が異なって見えてユーザに違和感を持たせてしまう。また、逆に高解像度のデバイスを用いて、デーブルディスプレイよりも高精細な画像を表示させたい場合もあるが、対応できていない。
【０００９】
さらに、会議の途中で各自のデバイスのローカル情報にアクセスしようとすると、いったんテーブルディスプレイから切断して、改めて各自のデバイスにアクセスする操作をしなければならないといったことが生じ、情報共有がスムーズに実現できない。
【００１０】
本発明は、斯かる実情に鑑み、端末表示装置を主表示装置の拡張表示領域として接続している状態で、その表示座標を簡単に検出すると同時に画面調整を行い、且つ端末表示装置と主表示装置の各記憶部にアクセス可能として、情報共有を速やかに行うことができる表示システム、主表示装置、端末表示装置及び表示方法を提供することを目的とする。
【課題を解決するための手段】
【００１１】
本発明は、主表示部に画像を表示する主表示装置と、該主表示装置に隣接あるいは重ねて配置し通信接続して端末表示部に画像を表示可能な端末表示装置とを備える表示システムにおいて、
前記主表示装置は、前記端末表示装置と通信接続する通信部と、前記主表示部と前記端末表示部のうち少なくとも前記主表示部には、移動可能な位置合わせマークを表示させてユーザに端末表示装置の配置位置を指定させ、前記主表示部に画像を表示する制御を行うとともに、前記配置位置に基づく前記端末表示部の表示画像を生成して、前記通信部を介して前記端末表示装置に送り前記主表示部の表示画像を送る主制御部と、を備え、
前記端末表示装置は、前記主表示装置と通信接続する端末通信部と、前記端末通信部を介して前記主表示装置から送られた表示画像を前記端末表示部に表示する端末制御部と、を備えることを特徴とする。
【００１２】
ここで、前記主表示装置と前記端末表示装置との通信接続には近接無線通信を使うことを特徴とする。
【００１３】
また、前記端末表示装置の端末制御部は、通信接続したときに、前記通信部を介して前記端末表示部の画面情報を前記主表示装置に送り、前記主表示装置の主制御部は、前記画面情報に基づいて、前記端末表示部の画面設定を前記主表示部の画面設定に合わせるように前記通信部を介して画面設定の指示を出し、前記端末表示装置の端末制御部は、前記指示に従って画面設定を行うことを特徴とする。
【００１４】
また、前記端末表示装置の端末制御部は、通信接続したときに、前記通信部を介して前記端末表示部の画面情報を前記主表示装置に送り、前記主表示装置の主制御部は、前記画面情報に基づいて、前記端末表示部の画面設定を前記主表示部の画面設定とは異なるように前記通信部を介して画面設定の指示を出し、前記端末表示装置の端末制御部は、前記指示に従って画面設定を行うことを特徴とする。
【００１５】
また、前記位置合わせマークは矢印であり、前記主表示装置の主制御部は、前記位置合わせマークを前記主表示装置と前記端末表示装置に表示させてもよいし、
前記位置合わせマークは、前記端末表示装置のサイズに該当する枠線であり、前記主表示装置の主制御部は、前記位置合わせマークを前記主表示装置に表示させるてもよい。
【００１６】
また、前記端末表示装置は、画像データを記憶する記憶部を備え、前記端末制御部は、前記主表示装置からの画像データを前記記憶部に記憶させ、前記主表示装置との通信接続が切れた場合には、前記記憶部の画像データを表示することを特徴とする。
【００１７】
また、前記主表示装置の主制御部は、前記主表示部と前記端末表示部にそれぞれの装置のローカルストレージにアクセスできるアイコンを表示し、該アイコンに対する操作に基づいて前記ローカルストレージにアクセス可能とすることを特徴とする。
【００１８】
また、本発明は、画像を表示する主表示部を備え、隣接あるいは重ねて配置された端末表示装置に、通信接続して端末表示部に画像を表示可能な主表示装置において、
前記端末表示装置と通信接続する通信部と、前記主表示部と前記端末表示部のうち少なくとも前記主表示部には、移動可能な位置合わせマークを表示させてユーザに前記端末表示装置の配置位置を指定させ、前記主表示部に画像を表示する制御を行うとともに、前記配置位置に基づく前記端末表示部の表示画像を生成して、前記通信部を介して前記端末表示装置に送り前記主表示部の表示画像を送る主制御部と、を備え、前記端末表示装置が、送られた表示画像を前記端末表示部に表示することを特徴とする。
【００１９】
また、本発明は、主表示部に画像を表示する主表示装置に隣接あるいは重ねて配置し通信接続して端末表示部に画像を表示可能な端末表示装置において、
前記主表示装置と通信接続する端末通信部と、前記端末通信部を介して前記主表示装置から送られた表示画像を前記端末表示部に表示する端末制御部と、を備え、前記端末制御部は、前記主表示装置が、前記主表示部と前記端末表示部のうち少なくとも前記主表示部には、移動可能な位置合わせマークを表示させてユーザに前記端末表示装置の配置位置を指定させ、前記主表示部に画像を表示する制御を行うとともに、前記配置位置に基づく前記端末表示部の表示画像を生成して、前記端末表示装置と通信接続する通信部を介して前記主表示部の表示画像を送った場合に、送られた表示画像を前記端末表示部に表示することを特徴とする。
【００２０】
また、本発明は、主表示部に画像を表示する主表示装置と、該主表示装置に隣接あるいは重ねて配置し通信接続して端末表示部に画像を表示可能な端末表示装置とを用いる表示方法において、
前記主表示装置が、前記主表示部と前記端末表示部のうち少なくとも前記主表示部には、移動可能な位置合わせマークを表示させてユーザに端末表示装置の配置位置を指定させ、前記主表示部に画像を表示する制御を行うとともに、前記配置位置に基づく前記端末表示部の表示画像を生成して、前記端末表示装置と通信接続する通信部を介して前記端末表示装置に送り前記主表示部の表示画像を送るステップと、前記端末表示装置が、前記主表示装置と通信接続する端末通信部を介して前記主表示装置から送られた表示画像を前記端末表示部に表示するステップと、を備えることを特徴とする表示方法。
【発明の効果】
【００２１】
本発明によれば、主表示装置１０の主表示部１２に対して拡張したい場所に端末表示装置２０を位置合わせマークにより簡単に配置でき、さらに端末表示装置２０の端末表示部２２の座標も主表示装置１０の主表示部１２の座標に換算できるので、すぐに拡張領域の画像を表示できる。
【図面の簡単な説明】
【００２２】
【図１】第１実施形態における拡張表示システムの構成を示す図である。
【図２】第１実施形態における主表示装置に端末表示装置を配置して拡張表示領域として機能させた説明図である。
【図３】第１実施形態における主表示装置（テーブルディスプレイ）と端末表示装置（タブレットＰＣ）の画面サイズを表した図である。
【図４】第１実施形態における拡張表示システムを示すブロック図である。
【図５】第１実施形態における表示システムの拡張表示モードの処理を示すフローチャートである。
【図６】第１実施形態における主表示装置と端末表示装置が、ＮＦＣ認識後、位置合わせマークを表示した図である。
【図７】仮想スクリーンによる表示を示す図である。
【図８】仮想スクリーン表示おける端末表示装置の座標の求め方を示す説明図である。
【図９】位置合わせマーク（矢印）の角度計算を示す説明図である。
【図１０】主表示装置１０と端末表示装置２０ａに位置合わせマークを表示させた図である。
【図１１】端末表示装置を主表示装置に位置合わせマーカーを合わせて隣接配置した図である。
【図１２】主表示装置の下方に隣接配置した端末表示装置の拡張表示を示す図である。
【図１３】端末表示装置の記憶部の格納フォルダや格納ファイルを表示する図である。
【図１４】アイコンにタッチされた場合の表示処理を示すフローチャートである。
【図１５】第１実施形態における端末表示装置を主表示装置の右上に配置した場合を示す説明図である。
【図１６】第１実施形態における端末表示装置を主表示装置の左上角部に斜め配置したことを示す説明図である。
【図１７】第２実施形態における主表示装置の主表示部の端部で端末表示装置の端末表示部が重なりあって拡張表示をする説明図である。
【図１８】第２実施形態における主表示装置の主表示部の内部で端末表示装置の端末表示部が完全に重なりあって表示をする説明図である。
【図１９】第３実施形態における高解像度の端末表示装置を重ね配置して高精細画像を表示させる図である。
【図２０】第３実施形態における端末表示装置を主表示装置に隣接配置して高精細の画像を拡張表示させる図である。
【図２１】第４実施形態における位置合わせマークである枠線を表示させるタッチポイントを示す図である。
【図２２】第４実施形態における位置合わせマークである枠線の表示を示す図である。
【図２３】第４実施形態における位置合わせマークである枠線を回転できることを示す図である。
【図２４】第４実施形態における端末表示装置に表示される画像を示す図である。
【図２５】第５実施形態における端末表示装置が主表示装置との通信接続が切れても画像表示を維持する図である。
【図２６】第５実施形態における画像表示維持の処理を示すフローチャートである。
【発明を実施するための形態】
【００２３】
以下、本発明の実施の形態を添付図面を参照して説明する。
【００２４】
［第１実施形態］
第１実施形態は、テーブルディスプレイなどの主表示装置に隣接して、タブレットＰＣなどの端末表示装置を配置し、拡張表示を行うものである。
【００２５】
図１は、第１実施形態における拡張表示システムの構成を示す図である。
主表示装置１０は、テーブルディスプレイであり、主表示部１２と天板部１７を備えている。主表示部１２は、液晶や有機ＥＬからなるディスプレイであり、図１では、鉢に植えられた植物の画像が表示されている。天板部１７は、主表示部１２の周囲に設けられて主表示部１２を支持して保護する枠体である。３つの端末表示装置２０ａ，２０ｂ，２０ｃがあり、これらは主表示装置１０の拡張表示領域として利用されるものであり、前面に液晶や有機ＥＬのディスプレイである端末表示部２２ａ，２２ｂ，２２ｃが配置されている。主表示装置１０と端末表示装置２０との接続は無線が望ましいが、ＵＳＢ等の有線接続でも構わない。
【００２６】
図２は、主表示装置に端末表示装置を配置して拡張表示領域として機能させた説明図である。
【００２７】
端末表示装置２０ａを主表示部１２の下方に隣接配置して、端末表示部２２ａには花の鉢の下側を表示する。また、端末表示装置２０ｂを主表示部１２の右横に隣接配置して、端末表示部２２ｂには花を表示する。端末表示装置２０ｃを主表示部１２の左上方の角部に斜めに配置し、端末表示部２２ｃには太陽を表示する。このように、主表示部１２だけでは表示しきれなかったものを、端末表示装置２０ａ，２０ｂ，２０ｃを配置することによって拡張表示することが可能となる。
【００２８】
さらに、主表示装置１０と端末表示装置２０ａ，２０ｂ，２０ｃには、各装置に接続しているローカルストレージを示すアイコン１８，２８ａ，２８ｂ，２８ｃが表示されている。ここの部分にタッチすると、各表示装置１０，２０ａ，２０ｂ，２０ｃに接続しているストレージにアクセスして、そこに記憶されているファイルを表示できる。これは、各端末表示装置２０ａ，２０ｂ，２０ｃが拡張表示領域として機能している状態でも関係なく、表示できるものである（詳細は後述する）。
【００２９】
図３は、主表示装置（テーブルディスプレイ）と端末表示装置（タブレットＰＣ）の画面サイズを表した図である。図３（ａ）に示す主表示装置１０の主表示部１２は７０インチのディスプレイ、図３（ｂ）に示す端末表示装置２０の端末表示部２２は７インチのディスプレイとする。これは一例にすぎず、他のサイズや解像度のものでも構わない。
【００３０】
現状、主表示装置１０の主表示部１２のような大きなディスプレイの場合、高解像度の物は作りにくく、１９２０＊１０８０ドットもしくは１９２０＊１２００ドットの程度のものが主流であり、高解像度の物でも３８４０＊２１６０程度のものがあるくらいである。一方、端末表示装置２０の端末表示部２２に用いられるディスプレイは、高解像度の物を量産出来るようになっており、７インチのタブレットＰＣでも１９２０＊１２００もしくは１９２０＊１０８０のものが主流となっている。つまり、図３（ｃ）（ｄ）に示すように、両者の間には粒（ドット）の大きさが１０倍程度異なる。この差は非常に大きく、両者の鮮鋭度の差は明らかである。ここでは話を分かりやすくする為、両者とも１９２０＊１２００ドットのものを使用する事にする。仮にドットの大きさを１０倍とすると、主表示装置１０と同じ解像度で表示する場合、端末表示装置２０では、主表示装置１０の１ドットを１０＊１０の１００ドットで表現すれば良い事になる。
【００３１】
図４は、第１実施形態における拡張表示システムを示すブロック図である。
このシステムは、テーブルディスプレイなどの大型画面を有する主表示装置１０と、タブレットＰＣなどの小型画面を有する端末表示装置２０から構成される。
主表示装置１０は、主制御部１１、主表示部１２，タッチ検出部１３、記憶部１４、第１通信部１５、第２通信部１６を備えている。また、端末表示装置２０は、端末制御部２１、端末表示部２２，タッチ検出部２３、記憶部２４、第１通信部２５、第２通信部２６を備えている。
【００３２】
主制御部１１と端末制御部２１は、主表示装置１０と端末表示装置２０の全体をそれぞれ制御するための機能部である。主制御部１１と端末制御部２１は、記憶部１４，２４に記憶されている各種プログラムを読み出して実行することにより各種機能を実現しており、例えばＣＰＵ（Central Process Unit）等により構成されている。
【００３３】
主表示部１２と端末表示部２２は、各種情報を表示するための機能部である。例えば、液晶ディスプレイ（ＬＣＤ）や、有機ＥＬディスプレイ等により構成されている。
【００３４】
タッチ検出部１３，２３は、操作者からの指またはペンによるタッチ入力の座標を検出できる機能部である。本実施形態においては、主表示部１２や端末表示部２２と一体となってタッチパネルとして形成されている。タッチ検出部１３，２３は、操作者からのタップ、ホールド、スライド、フリック、ホールドといった各種操作を検出することが可能である。
【００３５】
記憶部１４，２４は、主表示装置１０と端末表示装置２０の各動作に必要な各種プログラムや、各種データが記憶されている機能部である。記憶部１４，２４は、例えば、半導体メモリや、ＨＤＤ（Hard Disk Drive）等により構成されている。
【００３６】
第１通信部１５，２５は、無線にて他の装置と通信（認証）するインターフェース部である。例えば、ＮＦＣ（Near Field Communication）などであり、近距離通信に限定され、「かざす」だけで、誰でも簡単にデータ通信が可能になる特徴を有する。予め認証登録しておけば、主表示装置１０に端末表示装置２０を「かざす」だけで、認証処理が行われて、互いにデータのやり取りが可能となる。
【００３７】
なお、主表示装置１０の主制御部１１と記憶部１４は、主表示装置１０に内蔵されておらず、外部に配置されるＰＣでもよい。また、記憶部１４はさらにネットワークに接続するサーバによって管理されるものでもよい。また、端末表示装置２０の記憶部２４はさらにネットワークに接続するサーバによって管理されるものでもよい。
【００３８】
第２通信部１６，２６は、インターネットの外部ネットワークや、他の機器と接続するためのネットワークインタフェース部である。例えば、ＮＩＣ等により構成されている。
【００３９】
図５は、第１実施形態における表示システムの拡張表示モードの処理を示すフローチャートである。
ユーザが主表示装置１０のタッチ検出部１３をタッチ操作して拡張表示モードに設定を行うと、主制御部１１は、記憶部１４から画面制御アプリケーションを読み込み起動する（ステップＳ１）。端末表示装置２０を主表示装置１０に近づけると、主表示装置１０の第１通信部１５と端末表示装置２０の第１通信部２５の間で認証識別のための通信が始まる。主表示装置１０の主制御部１１に、端末表示装置２０からＮＦＣ認証の情報が入ると（ステップＳ１２）、主制御部１１は、認証処理を行い、端末表示装置２０の認証処理が問題無くなくできたかを確認する（ステップＳ１３）。認証処理が問題無く済むと、端末表示装置２０に画面情報を要求し、入手する（ステップＳ１４）。
【００４０】
この情報に基づいて主表示装置１０の表示座標と端末表示装置２０の端末表示部２２の表示座標の位置合わせ設定を行う（ステップＳ１５）。
【００４１】
次に、端末表示部２２の画面の解像度の設定を行う（ステップＳ１６）。一般的には、主表示装置１０の主表示部１２の解像度に合わせて設定を行うが、場合によっては、端末表示装置２０の端末表示部２２の解像度をそのまま用いて高精細表示を行う。
【００４２】
次に端末表示装置２０の色補正設定を行う。これも、一般的には、主表示装置１０の主表示部１２の色設定に合わせて設定を行う。
【００４３】
これらの画面設定が終了して、主制御部１１は、この設定に基づいて、画像の表示データを生成し、第１通信部１５、あるいは第２通信部１６から端末表示装置２０に画像データを出力する。端末表示装置２０の端末制御部２１は、この画像データを端末表示部２２に表示する。
ステップＳ１５〜Ｓ１７は、処理順はこれに限定されるものではなく、どれが先であっても構わない。
【００４４】
ステップＳ１５の位置合わせ設定について詳しく説明する。図６は、位置合わせ設定の処理を示すフローチャートである。
【００４５】
端末表示装置２０から入手した端末表示部２２の画面情報から、端末表示部２２の画面座標を設定する（ステップＳ２１）。主表示装置１０の主制御部１１は主表示部１２に位置合わせマーク（例えば矢印）を表示するとともに、端末表示装置２０の端末制御部２１にも位置合わせマークの画像データを送り、端末表示部２２に、前記マークと同様の位置合わせマークを表示させる（ステップＳ２２）。
【００４６】
ここで、ユーザに位置合わせマークを表示する処理に入ることを表示通知し、位置合わせマークの位置をタッチさせるようにしても良い。
【００４７】
ユーザは、端末表示装置２０を拡張表示させたい位置に配置するために、それぞれのマークを移動しても良い。この場合は、タッチ操作（ドラッグなど）によって移動（平行移動や回転移動）させる。主制御部１１は、主表示部１２に表示されている矢印と、端末表示部２２に表示されている矢印が一致しているものとして、端末表示部２２の表示座標を仮想スクリーン上の座標に変換する（ステップＳ２３）。
【００４８】
ユーザは、主表示装置１０に表示される位置合わせマークと、端末表示装置２０に表示される位置合わせマークを合わせるように、端末表示装置２０を主表示装置１０に配置する。
【００４９】
図７は、仮想スクリーンによる表示を示す図である。図７に示すように、主表示装置１０と端末表示装置２０とを同じ解像度で接続する場合、主表示装置１０の記憶部１４上にあらかじめ画像全体（図７の格子部分）を描いておき、端末表示装置２０を置いた場所に該当する画像を、主表示装置１０から端末表示装置２０に引き渡す方法が考えられる。この方法を用いれば、どのように端末表示装置を置いても、仮想スクリーン上で対応する画素のビデオ信号を引き渡すだけで簡単に画像ファイルを表示する事が出来る。
【００５０】
次に、端末表示装置１０の位置座標を求める方法を説明する。
【００５１】
図８は、仮想スクリーン表示おける端末表示装置の座標の求め方を示す説明図である。
実際のディスプレイでは、例えば、左上を（０，０）、右下を（３０００，２０００）とするが、話を分かりやすくする為、左下を（０，０）右上を（（３０００，２０００）とした座標で説明する。
【００５２】
図９は、位置合わせマーク（矢印）の角度計算を示す説明図である。位置合わせマーク（矢印）の角度θは、矢印の始点座標と終点座標のアークタンジェントにより簡単に導き出される。従って、図９にあるように、矢印の始点座標（１６００，５００）とし、終点座標（１６５０、５５０）とした場合、矢印の角度θは、以下の式により求まる。
θ＝ｔａｎ-1（ｙ／ｘ）
＝ｔａｎ-1（５５０−５００）／（１６５０−１６００）
＝４５°
【００５３】
位置合わせマークの角度が分れば、これに基づいて、図７に示す仮想スクリーン表示における端末表示部２２の座標が求められる。
いま、位置合わせマーク（矢印）が（２３２０，１６００）の位置にあり、４５°の角度があったとする。本来平行（０°）で配置した場合、主制御部１１はグラフィックスメモリ上の（２４７０，１５６０）の内容を端末表示装置２０に表示すれば良かったが、４５°の角度で傾けた状態では、その補正が必要になる。
【００５４】
補正座標（Ｘ’，Ｙ’）とすると、元の座標（Ｘ，Ｙ）に対して、回転の補正は、次の式（１次変換）で行える。
【数１】
2016057674.tif 000003
【００５５】
しかし、矢印の位置を基準に回転を行う場合、軸の平行移動が必要で、その値をａ，ｂとすると次の式で求めることができる。
【数２】
2016057674.tif 000004
【００５６】
以上に、（２４７０，１５６０）は、（２３２０，１６００）の位置で回転したので、次の式で補正座標を求めることができる。
【数３】
2016057674.tif 000005
【００５７】
従って、（２４７０，１５６０）の補正座標は、（２４５４，１６７８）となる。このような補正座標によって、主表示装置１０の主制御部１１は、その補正座標の位置に描かれている画像を端末表示装置２０に出力し、端末表示装置２０がそれを表示すれば良い事になる。
【００５８】
さて以下に、主表示装置１０の主表示部１２を拡張表示する具他的実施例について説明する。まず、端末表示装置２０ａが、主表示装置１０の主表示部１２の下方に配置される例である。
【００５９】
図１０は、主表示装置と端末表示装置が、ＮＦＣ認識後、位置合わせマークを表示した図である。
図５のステップＳ１３においてＮＦＣ認証が問題なく済むと、端末表示装置２０ａから画面情報（サイズ、解像度、色温度等）の情報が主表示装置１０へ送られる（ステップＳ１４）。それで、主表示装置１０は、図６に示す位置合わせ処理を開始する。
【００６０】
まず、主表示装置１０の主制御部１１は、画面情報から端末表示装置単独の座標を得る。そして、主表示部１２に位置合わせマーク１９ａを表示させ、さらに端末表示装置２０ａにも位置合わせマーク２９ａの画像データを送って端末表示部２２に表示させる。図１０は、主表示装置１０と端末表示装置２０ａに位置合わせマークを表示させた図である。
【００６１】
位置合わせマーク１９，２９ａは回転可能であるので、位置合わせする方向を示すように矢の先端を向ける。ユーザは、矢を位置合わせする位置と方向に合わせ、図１１に示すように、端末表示装置２０ａの位置合わせマーク２９ａを、主表示装置１０の位置合わせマーク１９の矢印の先端と矢印の方向が一致するように配置する。
【００６２】
端末表示装置２０の表示座標は、位置合わせマーク１９の先端が示す座標が、位置合わせマーク２９ａの先端が示す座標となるから、主制御部１１は、主表示装置１０の主表示部１２の座標に換算することができる。主制御部１１は、図７に示す仮想スクリーン表示の座標から端末表示装置２０ａの端末表示部２２に表示する画像データを記憶部１４から抽出することができ、それを端末表示装置２０ａに送る。端末表示装置２０は傾いて配置されていないので、座標回転は考える必要が無い。
【００６３】
こうして、端末表示装置２０ａは、配置された位置における仮想スクリーン表示の画像を表示する。図１２は、主表示装置の下方に隣接配置した端末表示装置の拡張表示を示す図である。
【００６４】
主表示装置１０の主表示部１２には、図１で示す画像が表示されている。主表示部１２の下端部に端末表示装置２０ａを配置し、主表示部１２に表示しきれていない鉢の下方部分を表示させる。このとき、主表示装置１０の主表示部１２の右上には、主表示装置１０が接続するストレージを表わすアイコンが表示されている。また、端末表示装置２０ａの端末表示部２２ａの右上には、端末表示装置２０ａが接続するストレージを表わすアイコン２８ａが表示されている。
【００６５】
ここで、ローカルストレージを表わすストレージアイコン２８ａについて説明する。
ストレージアイコン２８ａは、これにタッチすると、何を表示していようと、端末表示装置２０ａが接続しているローカルストレージである記憶部２４ａにアクセスして、その格納フォルダやファイルを表示する機能を有するものである。ローカルストレージは、端末表示装置２０ａの内蔵記憶媒体でもよいし、端末表示装置２０ａがアクセス可能なネットワーク上の記憶媒体でもよい。
【００６６】
図１３は、端末表示装置の記憶部の格納フォルダや格納ファイルを表示する図である。図１４は、アイコンにタッチされた場合の表示処理を示すフローチャートである。
【００６７】
ユーザがストレージアイコン２８ａにタッチすると（ステップＳ３１）、そのタッチ位置とタッチ操作を示す操作信号を主表示装置１０に送る（ステップＳ３２）。主制御部１１は、この操作信号からストレージアイコン２８ａに対するタッチ操作であることを認識して、端末表示装置２０ａのあらかじめ設定しておいたローカルストレージにアクセスする（ステップＳ３３）。そしてローカルストレージの格納フォルダや格納ファイルを示す画像を生成して、端末表示装置に送る（ステップＳ３４）。図１３に示すように、端末表示装置２０ａは、端末表示部２２ａに送られた画像を表示する。これ以降の処理は、フォルダやファイルを示すアイコンに対するタッチ処理に応じて処理を行っていく（ステップＳ３５）。
【００６８】
この処理は、端末表示装置２０ａの場合についての説明だったが、主表示部１２に表示されたストレージアイコン１８においても同様の処理が行われる。
【００６９】
図１５は、端末表示装置を主表示装置の右上に配置した場合を示す説明図である。
これは、主表示装置１０を右上に端末表示装置２０ｂを縦置きに配置した場合である。これも前述したように、位置合わせマークを表示させて、ユーザが表示させたい位置に、主表示装置１０の主表示部１２に表示したマーク１９ｂと、端末表示装置２０ｂの端末表示部２２ｂに表示させたマーク２９ｂとを移動させ、そのマークの矢印に合わせるように配置する。端末表示装置２０の表示座標は、位置合わせマーク１９が示す座標が、位置合わせマーク２９ａの示す座標となるから、主制御部１１は、主表示装置１０の主表示部１２の座標に換算することができる。これは図７に示す仮想スクリーンの座標から端末表示装置２０ａの端末表示部２２に表示する画像データを記憶部から抽出することができ、それを表示する。
【００７０】
次に、図１６は、端末表示装置を主表示装置の左上角部に斜め配置したことを示す説明図である。これも前述したように、位置合わせマーク１９，２９Ｃを表示させて、ユーザが表示させたい位置に、主表示装置１０の主表示部１２に表示したマーク１９と、端末表示装置２０ｃの端末表示部２２ｃに表示させたマーク２９ｃとを移動させる。そして端末表示装置を、そのマークの矢印に合わせるように配置する。しかし、この場合は、端末表示装置２０ｃが斜めに配置されているため、端末表示装置２０ｃの端末表示部２２ｃの座標を求めるには、図８で説明した座標回転によって求める。
【００７１】
このように、主表示装置１０の主表示部１２に対して拡張したい場所に端末表示装置２０を位置合わせマークにより簡単に配置でき、さらに端末表示装置２０の端末表示部２２の座標も主表示装置１０の主表示部１２の座標に換算できるので、すぐに拡張領域の画像を表示できる。
【００７２】
拡張表示を行っている場合に、例えば各端末表示装置２０のローカルストレージ（記憶部２４やクラウドサーバなど）に格納されているファイルを処理したい場合がある。上述したように、今までは、一旦ＮＦＣによる接続を切って処理を行っていたのであるが、このまま接続状態で、図１３に示したように、端末表示装置２０の端末表示部２２に格納フォルダや格納ファイルを表示させて処理ができる。
【００７３】
こうして、表示装置が接続しているストレージを示すアイコンも表示しているので、ユーザが画像表示ではなく、ストレージ（クラウド）に保存されているデータを表示させることも簡単に行える。
【００７４】
［第２実施形態］
第２実施形態は、主表示装置１０の主表示部１２に、端末表示装置２０を重ねて表示する場合である。
図１７は、主表示装置の主表示部の端部で端末表示装置の端末表示部が重なりあって拡張表示をする説明図である。図１８は、主表示装置の主表示部の内部で端末表示装置の端末表示部が完全に重なりあって表示をする説明図である。
【００７５】
図１７においては、端末表示装置２０の端末表示部２２の左下方角部に位置合わせマーク２９を表示する。主表示装置１０の主表示部１２の右上角部から少し離れた内部に位置合わせマーク１９を表示する。ユーザは、それぞれの位置合わせマーク１９，２９の矢印の先端とその方向が一致するように、主表示装置１０の主表示部１２に重ねて、端末表示装置２０を配置する。
【００７６】
前述したように、主表示装置１０の主制御部１１は、端末表示装置２０の端末表示部２２の座標を主表示部１２の座標に換算し、記憶部１４に記憶されている仮想スクリーンの画像データから、端末表示装置２０の端末表示部２２に表示する画像データを抽出する。これは第１実施形態で説明した通りである。そして、端末表示装置２０の端末制御部２１は、画像データに基づいて、端末表示部２２に画像を表示する。この場合は、画像が重なる部分には主表示部１２と同じ画像が表示され、主表示部１２からはみ出している部分には、仮想スクリーンの該当部分の画像の表示を行うことなる。
【００７７】
主表示部１２と端末表示部２２の画面右上には、ストレージアイコン１８，２８が表示されている。これは第１実施形態で説明した通り、ここにタッチすると、それぞれの表示装置に接続するローカルストレージにアクセスして、格納フォルダや格納ファイルを表示するウインドウを開いたり、仮想スクリーンの画像表示を切り替えて表示する。
【００７８】
図１８の場合も、同様の処理で、端末表示装置２０に画像が表示されるが、この場合は、拡張表示されるところはなく、単に主表示装置１０に表示される画像と重複して端末表示装置２０に表示されるだけである。また、主表示部１２と端末表示部２２の画面右上には、ストレージアイコン１８，２８が表示されて、ローカルストレージにアクセス可能となっている。
【００７９】
このように、端末表示装置２０を主表示装置１０に重ねてしまっても、重なった部分は主表示装置１０に表示されている画像がそのまま表示され、拡張部分には重なった部分につながる仮想スクリーンの画像が表示されるので、ユーザに違和感が生じない。
【００８０】
［第３実施形態］
第３実施形態は、拡張表示をさせた端末表示装置２０の解像度を高精細にして表示する場合である。図３で説明したように、一般的に大サイズの画面に比べて、小サイズの画面の方が解像度が高い。それを利用して、高精細表示をさせたい部分に端末表示装置２０を配置する。
【００８１】
図１９は、第３実施形態における高解像度の端末表示装置を重ね配置して高精細画像を表示させる図である。同図では、格子の細かさによって、解像度の違いを表現しており、格子の細かい部分が端末表示装置２０の端末表示部２２を示している。この配置による表示処理については図１８において説明した処理とほぼ同様であるが、端末表示部２２の高精細表示の処理が異なる。
【００８２】
高精細部分の表示については、主制御部１１が、位置合わせマークの位置から記憶部１４の仮想スクリーンにおける端末表示部２２の表示範囲を特定して、画面情報から端末表示部の解像度を読み取り、それに基づいてその部分の高精細画像を生成して、端末表示装置２０に出力する。こうして、端末表示装置２０の端末制御部２１は、この高精細画像を端末表示部２２に表示する。
【００８３】
図２０は、端末表示装置を主表示装置に隣接配置して高精細の画像を拡張表示させる図である。この場合は、拡張表示させたい画像を高精細させるもので、二つの端末表示装置２０ａ，２０ｂを主表示装置１０の下部に配置して高精細表示をさせるものである。これらの画像は、例えば、鉢植えの花の栽培に携わった人物の画像である。高精細部分の表示処理は上記の説明と同様である。
【００８４】
こうして、主表示装置１０の画像の中で高解像度で表示させたい部分があった場合、そこに高解像度の端末表示装置２０を配置して高精細画像を表示させることができる。
【００８５】
［第４実施形態］
第４実施形態は、位置合わせマークが矢印ではなく、主表示装置１０の主表示部１２に枠線を表示させて、その場所に端末表示装置２０を配置する場合である。
【００８６】
図２１に示すように、画像のある点３１をタッチすると、図２２に示すように、端末表示装置２０の表示サイズが点線で枠線３２として表示され、これが位置合わせマークとなる。この場合は、タッチした点３１が、端末表示部２２の中心として表示される。そして、図２３に示すように、この枠線３２を表示させたい位置に平行移動や回転移動させることができる。この枠線に位置に端末表示装置２０を配置すれば、図２４に示すように、端末表示装置２０の表示部２２に画像が表示される。この図の枠線３２の場合は、主表示部１２の中に収まっているので、端末表示部２２に表示される画像は、その部分の主表示部１２に表示される画像と同じである。
【００８７】
また、前述したように、この枠線３２に配置した端末表示装置２０に、第３実施形態で説明した高精細表示を行わせてもよい。
【００８８】
こうして、主表示部１２に位置合わせマークとして枠線を表示することによって、ユーザは端末表示装置２０の周囲の形状に合わせられるので、矢印に比べて端末表示装置２０を配置し易くなる。また、矢印の場合と異なり主表示部１２のみに位置合わせマークを表示すれば良いので、表示処理も簡易化できる。
【００８９】
［第５実施形態］
第５実施形態は、端末表示装置２０に表示された画像は、端末表示装置２０を主表示装置１０から離してＮＦＣの通信接続が切れても、画像表示を続けるものである。この場合は、例えば、端末表示装置２０に対して、予め画像保持モードとすることによって可能となる。すなわち、画像保持モードとすることで、端末制御部２１は、記憶部２４に主表示装置１０から得た画像データを記憶しておき、それを表示し続ける。
【００９０】
図２５は、第５実施形態における端末表示装置が主表示装置との通信接続が切れても画像表示を維持する図である。位置合わせマークである枠線３２に配置されていた端末表示装置２０を移動させて、ＮＦＣの接続を切る。しかし、端末表示装置２０は画像保持モードであるため、そのまま画像表示を維持し続ける。
【００９１】
図２６は、第５実施形態における画像表示維持の処理を示すフローチャートである。
ユーザは主表示装置１０あるいは端末表示装置２０に対して、タッチ操作により画像保持モードとする（ステップＳ４１）。端末表示装置２０は、第３実施形態におけるように、位置合わせマークである枠線３２内に配置されて、主表示部１２から送られる画像を一旦記憶部２４に記憶して、それを表示している。端末表示装置２０を主表示装置１０から離して通信接続が切れた場合（ステップＳ４３；Ｙｅｓ）、端末表示装置２０は、記憶部２４に保存した画像の表示をそのまま続ける（ステップＳ４４）。
【００９２】
こうして、主表示装置１０の表示画像の部分で、端末表示装置２０に記憶させたい部分があれば、その部分に端末表示装置を置くだけで、その部分の画像を端末表示装置２０が記憶するので、非常に簡単な操作が画像の取り込みができる。
【００９３】
なお、図２５で、端末表示装置２０にストレージアイコンが表示されていないが、これは、もはやＮＦＣによる通信接続が切れているので、表示されていない。端末表示装置２０は、自らの持つ機能でストレージにアクセスできる状態となる。
【００９４】
本発明による拡張表示システムで動作するプログラムは、本発明に関わる上記実施形態の機能を実現するように、ＣＰＵ（Central Processing Unit）等を制御するプログラム（コンピュータを機能させるプログラム）であっても良い。そして、これら装置で取り扱われる情報は、その処理時に一時的にＲＡＭ（Random Access Memory）に蓄積され、その後、Ｆｌａｓｈ  ＲＯＭ（Read Only Memory）などの各種ＲＯＭやＨＤＤ（Hard Disk Drive）に格納され、必要に応じてＣＰＵによって読み出し、修正・書き込みが行われる。また、各構成の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより各部の処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
【００９５】
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
【００９６】
以上、この発明の実施形態を図面を参照して詳述してきたが、具体的な構成はこれらの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計変更等された発明も含まれる。
【符号の説明】
【００９７】
１０    ：主表示装置
１１    ：主制御部
１２    ：主表示部
１３    ：タッチ検出部
１４    ：記憶部
１５    ：第１通信部
１６    ：第２通信部
１７    ：天板部
１８    ：ストレージアイコン
１９    ：位置合わせマーク
２０    ：端末表示装置
２１    ：端末制御部
２２    ：端末表示部
２３    ：タッチ検出部
２４    ：記憶部
２５    ：第１通信部
２６    ：第２通信部
２８    ：ストレージアイコン
２９    ：位置合わせマーク
【図１】
2016057674.tif 000006
【図２】
2016057674.tif 000007
【図３】
2016057674.tif 000008
【図４】
2016057674.tif 000009
【図５】
2016057674.tif 000010
【図６】
2016057674.tif 000011
【図７】
2016057674.tif 000012
【図８】
2016057674.tif 000013
【図９】
2016057674.tif 000014
【図１０】
2016057674.tif 000015
【図１１】
2016057674.tif 000016
【図１２】
2016057674.tif 000017
【図１３】
2016057674.tif 000018
【図１４】
2016057674.tif 000019
【図１５】
2016057674.tif 000020
【図１６】
2016057674.tif 000021
【図１７】
2016057674.tif 000022
【図１８】
2016057674.tif 000023
【図１９】
2016057674.tif 000024
【図２０】
2016057674.tif 000025
【図２１】
2016057674.tif 000026
【図２２】
2016057674.tif 000027
【図２３】
2016057674.tif 000028
【図２４】
2016057674.tif 000029
【図２５】
2016057674.tif 000030
【図２６】
2016057674.tif 000031