(57)【要約】【課題】表示装置とは別体の装置を操作して表示画像を変化させる場合に、設定等を知らないユーザーであっても容易に操作できるようにして、操作性の向上を図る。【解決手段】表示システム１は、プロジェクター１００と端末装置１０とを備える。端末装置１０は、端末装置１０とプロジェクター１００の位置および向きのうち、少なくともいずれかの対応づけを示す方向案内画像２１０を表示する。端末装置１０は、端末装置１０の位置および向きの少なくともいずれかを検出し、プロジェクター１００は、端末装置１０の位置または向きの変化に応じて投射画像２０１を変形させる。【選択図】図１
2015220732.tif 000002
【特許請求の範囲】
【請求項１】
表示装置及び端末装置を備える表示システムであって、
前記端末装置は、
前記端末装置の位置と前記表示装置の位置との対応付け、および、前記端末装置の向きと前記表示装置の向きとの対応付けのうち、少なくともいずれかを示す画像を表示する表示画面と、
前記端末装置の位置および向きの少なくともいずれかを検出する検出部と、を備え、
前記表示装置は、
画像を表示する表示部と、
前記端末装置の位置または向きの変化に応じて、前記表示部が表示する画像を変形させる画像処理部と、を備えること
を特徴とする表示システム。
【請求項２】
前記端末装置は、前記検出部の検出結果を、前記表示装置の位置または向きの変化に変換し、変換結果を送信部によって前記表示装置に送信する制御部を備え、
前記表示装置が備える前記画像処理部は、前記端末装置から送信される変換結果に従って前記表示部が表示する画像を変形させること、
を特徴とする請求項１記載の表示システム。
【請求項３】
前記端末装置は、前記検出部の検出開始または検出終了を、前記表示画面の表示によって報知すること、を特徴とする請求項１または２記載の表示システム。
【請求項４】
前記表示装置は、投射対象に画像光を投射する前記表示部を備えるプロジェクターであり、
前記プロジェクターの光軸方向と前記端末装置が備える前記表示画面の長手方向とが重なるように、前記端末装置の向きと前記表示部の向きとが対応付けられたこと、
を特徴とする請求項１から３のいずれかに記載の表示システム。
【請求項５】
前記表示装置が備える前記画像処理部は、前記端末装置の位置または向きの変化を、前記表示部の位置または向きの変化とみなして、前記表示部が投射する画像の台形歪み補正、表示倍率の変更及びフォーカス調整の少なくともいずれかを実行すること、を特徴とする請求項４記載の表示システム。
【請求項６】
前記端末装置が備える前記検出部は、前記表示画面の長手方向に略直交する第２の方向または第３の方向に平行な軸を中心とした前記端末装置の回転量を検出し、
前記表示装置が備える前記画像処理部は、前記端末装置で検出された前記端末装置の回転量に基づいて、前記表示部が投射する画像の台形歪み補正を実行すること、を特徴とする請求項５記載の表示システム。
【請求項７】
前記端末装置が備える前記検出部は、前記端末装置の前記長手方向における移動を検出し、前記表示装置が備える前記画像処理部は、前記端末装置で検出された前記端末装置の移動に対応して、前記表示部が投射する画像の表示倍率の変更を実行すること、を特徴とする請求項４から６のいずれかに記載の表示システム。
【請求項８】
端末装置であって、
外部の表示装置に情報を送信する送信部と、
前記端末装置の位置と前記表示装置の位置との対応付け、および、前記端末装置の向きと前記表示装置との対応付けのうち、少なくともいずれかを示す画像を表示する表示画面と、
前記端末装置の位置および向きの少なくともいずれかを検出する検出部と、
前記検出部で検出した前記端末装置の位置または向きの変化に基づき、前記表示装置の位置または向きの変化を示す情報を生成して前記送信部により送信させる制御部と、
を備えることを特徴とする端末装置。
【請求項９】
端末装置を制御するコンピューターにより実行可能なプログラムであって、
前記コンピューターにより、
前記端末装置の位置と外部の表示装置の位置との対応付け、および、前記端末装置の向きと前記表示装置との対応付けのうち、少なくともいずれかを示す画像を表示画面に表示しと、
前記端末装置の位置および向きの少なくともいずれかを検出した場合に、検出した前記端末装置の位置または向きの変化に基づき、前記表示装置の位置または向きの変化を示す情報を生成して前記表示装置に送信すること、
を特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示システム、端末装置、および、プログラムに関する。
【背景技術】
【０００２】
従来、プロジェクター等の表示装置が表示する画像の表示状態を、プロジェクターとは別体の装置によって制御するシステムが知られている（例えば、特許文献１、２参照）。特許文献１では、プロジェクターのリモコンを傾ける操作を行った場合に、リモコンの傾き角度に応じてプロジェクターが画像を補正する。特許文献２では、携帯機器が出力する画像をプロジェクターがスクリーンに表示する構成において、携帯機器の傾きに基づき、プロジェクターが、スクリーンにおいて画像を傾かせる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−４０３６７号公報
【特許文献２】特開２０１３−１４６０４９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記従来の構成では、表示される画像が所望の状態になるように、ユーザーがリモコンや携帯機器等の装置を傾ける操作を行う必要がある。この構成では、装置の傾き方と画像の変化との対応関係をユーザーが予め知っている必要がある。仮に、この対応関係を知らないユーザーが操作を行う場合は、装置を傾ける操作を行って知識を得る必要があった。
本発明は、上述した事情に鑑みてなされたものであり、表示装置とは別体の装置を操作して表示画像を変化させる場合に、設定等を知らないユーザーであっても容易に操作できるようにして、操作性の向上を図ることを目的とする。
【課題を解決するための手段】
【０００５】
上記目的を達成するために、本発明は、表示装置及び端末装置を備える表示システムであって、前記端末装置は、前記端末装置の位置と前記表示装置の位置との対応付け、および、前記端末装置の向きと前記表示装置の向きとの対応付けのうち、少なくともいずれかを示す画像を表示する表示画面と、前記端末装置の位置および向きの少なくともいずれかを検出する検出部と、を備え、前記表示装置は、画像を表示する表示部と、前記端末装置の位置または向きの変化に応じて、前記表示部が表示する画像を変形させる画像処理部と、を備えることを特徴とする。
本発明によれば、設定等を知らないユーザーであっても、携帯型の端末装置を操作することによって、表示画像を所望の状態に変形させることができ、操作性の向上を図ることができる。
【０００６】
ここで、前記端末装置は、前記端末装置の位置を検出する前記検出部を備え、前記端末装置の位置と前記表示装置の位置との対応付けを示す画像を前記表示画面に表示し、前記表示装置は、前記端末装置の位置の変化に応じて、前記表示部が表示する画像を変形させてもよい。また、前記端末装置は、前記端末装置の向きを検出する前記検出部を備え、前記端末装置の向きと前記表示装置の向きとの対応付けを示す画像を前記表示画面に表示し、前記表示装置は、前記端末装置の向きの変化に応じて、前記表示部が表示する画像を変形させてもよい。
【０００７】
本発明は、上記表示システムにおいて、前記端末装置は、前記検出部の検出結果を、前記表示装置の位置または向きの変化に変換し、変換結果を送信部によって前記表示装置に送信する制御部と、を備え、前記表示装置が備える前記画像処理部は、前記端末装置から送信される変換結果に従って前記表示部が表示する画像を変形させること、を特徴とする。
本発明によれば、端末装置により検出された端末装置の位置または向きが、表示装置の位置または向きに変換されて、表示装置に送信される。このため、表示装置が表示画像を変化させる処理の負荷を軽減し、処理の効率化を図ることができる。
【０００８】
本発明は、上記表示システムにおいて、前記端末装置は、前記検出部の検出開始または検出終了を、前記表示画面の表示によって報知すること、を特徴とする。
本発明によれば、端末装置を操作するユーザーに対して、検出の開始あるいは終了を通知することができ、より一層、操作性を高めることができる。
【０００９】
本発明は、上記表示システムにおいて、前記表示装置は、投射対象に画像光を投射する前記表示部を備えるプロジェクターであり、前記プロジェクターの光軸方向と前記端末装置が備える前記表示画面の長手方向とが重なるように、前記端末装置の向きと前記表示部の向きとが対応付けられたこと、を特徴とする。
本発明によれば、端末装置の位置または方向が変化した場合に、表示画面の長手方向がプロジェクターの光軸に対応するように、画像が変化するので、ユーザーが直感的に操作を行うことができる。
【００１０】
本発明は、上記表示システムにおいて、前記表示装置が備える前記画像処理部は、前記端末装置の位置または向きの変化を、前記表示部の位置または向きの変化とみなして、前記表示部が投射する画像の台形歪み補正、表示倍率の変更及びフォーカス調整の少なくともいずれかを実行すること、を特徴とする。
本発明によれば、プロジェクターが投射する画像の台形歪み補正、表示倍率の変更、フォーカス調整に関する操作を、端末装置を用いて容易に行うことができる。
【００１１】
本発明は、上記表示システムにおいて、前記端末装置が備える前記検出部は、前記表示画面の長手方向に略直交する第２の方向または第３の方向に平行な軸を中心とした前記端末装置の回転量を検出し、前記表示装置が備える前記画像処理部は、前記端末装置で検出された前記端末装置の回転量に基づいて、前記表示部が投射する画像の台形歪み補正を実行すること、を特徴とする。
本発明によれば、端末装置を、表示画面の長手方向に略直交する方向を軸として回転させることにより、プロジェクターが投射する画像の台形歪み補正が実行される。このため、端末装置の操作方法を増やして多機能化を図ることができ、操作性を向上させることができる。
【００１２】
本発明は、上記表示システムにおいて、前記端末装置が備える前記検出部は、前記端末装置の前記長手方向における移動を検出し、前記表示装置が備える前記画像処理部は、前記端末装置で検出された前記端末装置の移動に対応して、前記表示部が投射する画像の表示倍率の変更を実行すること、を特徴とする。
本発明によれば、端末装置を、表示画面の長手方向に移動させる操作により、画像の表示倍率を変更させることができ、表示倍率に係る操作を直感的に行うことができる。
【００１３】
また、上記目的を達成するために、本発明は、端末装置であって、外部の表示装置に情報を送信する送信部と、前記端末装置の位置と前記表示装置の位置との対応付け、および、前記端末装置の向きと前記表示装置との対応付けのうち、少なくともいずれかを示す画像を表示する表示画面と、前記端末装置の位置および向きの少なくともいずれかを検出する検出部と、前記検出部で検出した前記端末装置の位置または向きの変化に基づき、前記表示装置の位置または向きの変化を示す情報を生成して前記送信部により送信させる制御部と、を備えることを特徴とする。
本発明によれば、設定等を知らないユーザーであっても、携帯型の端末装置を操作することによって、表示画像を所望の状態に変形させることができ、操作性の向上を図ることができる。
【００１４】
また、上記目的を達成するために、本発明は、端末装置を制御するコンピューターにより実行可能なプログラムであって、前記コンピューターにより、前記端末装置の位置と外部の表示装置の位置との対応付け、および、前記端末装置の向きと前記表示装置との対応付けのうち、少なくともいずれかを示す画像を表示画面に表示しと、前記端末装置の位置および向きの少なくともいずれかを検出した場合に、検出した前記端末装置の位置または向きの変化に基づき、前記表示装置の位置または向きの変化を示す情報を生成して前記表示装置に送信すること、を特徴とする。
本発明によれば、設定等を知らないユーザーであっても、携帯型の端末装置を操作することによって、表示画像を所望の状態に変形させることができ、操作性の向上を図ることができる。
【発明の効果】
【００１５】
本発明によれば、設定等を知らないユーザーであっても、携帯型の端末装置を操作することによって、表示画像を所望の状態に変形させることができ、操作性の向上を図ることができる。
【図面の簡単な説明】
【００１６】
【図１】表示システムの概略構成を示す図である。
【図２】端末装置の構成を示すブロック図である。
【図３】プロジェクターの構成の一例を示すブロック図である。
【図４】プロジェクター及び端末装置の処理手順を示すフローチャートである。
【図５】端末装置に表示される画像の例を示す図である。
【図６】プロジェクターにより実行される補正処理および変形処理を説明する図である。
【発明を実施するための形態】
【００１７】
以下、添付図面を参照して本発明の実施形態について説明する。
図１に、本実施形態の表示システム１の概略構成を示す。本実施形態の表示システム１は、入力装置としての端末装置１０と、表示装置としてのプロジェクター１００とを備える。
端末装置１０とプロジェクター１００とは、無線通信方式によって各種データを送受信可能に接続される。この無線通信方式には、例えば無線ＬＡＮ（Local Area Network）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＵＷＢ（Ultra Wide Band）、赤外線通信等の近距離無線通信方式や、携帯電話回線を利用した無線通信方式を採用できる。プロジェクター１００は、複数の端末装置１０に接続して、これらの端末装置１０と通信できる。
【００１８】
端末装置１０は、ユーザーが手に持って操作する小型の装置であり、例えば、スマートフォン等の携帯電話、タブレット端末、ＰＤＡ（Personal Digital Assistants）等の装置である。端末装置１０は、平板状の端末装置本体１１（本体）を有し、端末装置本体１１の表面には表示パネル５２（表示画面）が配置され、表示パネル５２の表面にはユーザーの接触操作を検出するタッチスクリーン５３（図２）が配置される。表示パネル５２は、図１に示すように、端末装置本体１１の最も広い面の一方において、ほぼ全面を覆うように配置される。また、本実施形態の表示パネル５２は細長い矩形であり、ユーザーが長辺と短辺とを明らかに区別できる。また、端末装置１０は、タッチスクリーン５３の他の入力デバイスとして各種スイッチを備えてもよい。
プロジェクター１００は、投射対象に画像光を投射して、投射対象の面に画像を形成する。プロジェクター１００が画像を投射する投射対象は、平面であっても曲面や凹凸面であってもよいが、本実施形態では、平面で構成されるスクリーンＳＣに投射する例を示す。スクリーンＳＣは壁面等の固定された平面を利用してもよいし、吊り下げ式や立ち上げ式の幕状のスクリーンであってもよい。図１はプロジェクター１００の設置状態を示す。プロジェクター１００は、箱形のプロジェクター本体１０１（本体）を有し、プロジェクター本体１０１の一つの面には画像光を投射する投射開口部１１４が設けられる。投射開口部１１４は、プロジェクター本体１０１に内蔵される投射光学系１１３（図３）が光を放射する開口部である。
【００１９】
本実施形態では、スクリーンＳＣは矩形形状であり、プロジェクター１００はスクリーンＳＣの正面（前面）側に配置される。プロジェクター１００は、矩形の画像（静止画像及び動画像を含む）の画像光を投射し、スクリーンＳＣには矩形の投射画像２０１が形成される。図１の設置状態では、プロジェクター１００が、スクリーンＳＣの斜め上方から下向きに画像光を投射するので、スクリーンＳＣに形成される投射画像２０１は矩形ではなく、台形歪みを生じている。
【００２０】
表示システム１では、端末装置本体１１の位置及び方向と、プロジェクター本体１０１の位置及び方向とが、後述するように対応付けられる。このため、表示システム１では、端末装置本体１１及びプロジェクター本体１０１の各々について、位置及び方向の基準が定められる。
本実施形態では、一例として、端末装置本体１１及びプロジェクター本体１０１について、３次元直交座標系を設定し、この座標系を基準として端末装置本体１１及びプロジェクター本体１０１の位置及び方向に関する処理を行う。
【００２１】
端末装置本体１１には、表示パネル５２の長手方向の軸ＡＸ、軸ＡＸに直交し、表示パネル５２に平行な軸ＡＹ、及び、軸ＡＸに直交し、表示パネル５２に垂直な軸ＡＺが設定される。また、軸ＡＸを中心とした回転の方向をＣＸ方向の回転とし、軸ＡＹを中心とした回転の方向をＣＹ方向の回転とし、軸ＡＺを中心とした回転の方向をＣＺ方向の回転とする。軸ＡＸ、軸ＡＹ及び軸ＡＺは一点で交差することが好ましく、この交点を座標系の原点とすることができる。原点の位置は、本実施形態では端末装置本体１１の表面上とするが、端末装置本体１１の中心であってもよい。
プロジェクター本体１０１には、投射開口部１１４から投射する画像光の光軸に重なる軸ＰＸ、軸ＰＸに直交しプロジェクター本体１０１の設置面に平行な軸ＰＹ、及び、軸ＰＸに直交しプロジェクター本体１０１の設置面に垂直な軸ＰＺが設定される。また、軸ＰＸを中心とした回転の方向をＱＸ方向の回転とし、軸ＰＹを中心とした回転の方向をＱＹ方向の回転とし、軸ＰＺを中心とした回転の方向をＱＺ方向の回転とする。軸ＰＸ、軸ＰＹ及び軸ＰＺは一点で交差することが好ましく、この交点を座標系の原点とすることができる。原点の位置は、本実施形態ではプロジェクター本体１０１が投射する画像光の光軸上とする。プロジェクター本体１０１の中心や、プロジェクター本体１０１の上面に原点が位置してもよい。
【００２２】
表示システム１は、端末装置本体１１とプロジェクター本体１０１について、位置および方向の少なくともいずれかに対する処理を実行する。位置のみ、或いは方向のみについて、処理を行う構成とすることが可能である。本実施形態では、一例として、端末装置本体１１及びプロジェクター本体１０１の位置と、方向との両方について処理を行う場合を説明する。
【００２３】
図２は、端末装置１０の構成を示すブロック図である。
端末装置１０は、端末装置１０の各部を制御する制御部２０を備える。制御部２０は、図示しないＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等を備え、ＲＯＭに記憶した基本制御プログラムをＣＰＵにより実行して、端末装置１０を制御する。また、制御部２０は、記憶部３０に記憶されたアプリケーションプログラム３１を実行することにより、後述する表示制御部２１、動作検出部２３（制御部）、通信制御部２２として機能する（以下、これらを機能ブロックと呼ぶ）。
【００２４】
端末装置１０は、記憶部３０を備える。記憶部３０は、フラッシュメモリー、ＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory）等の不揮発性の記憶装置であり、制御部２０に接続される。記憶部３０は、アプリケーションプログラム３１を含む各種プログラムや、プロジェクター１００から受信した画像データ３２等を記憶する。また、記憶部３０は、方向設定データ３３を記憶する。方向設定データ３３は、端末装置本体１１（図１）の位置及び方向と、プロジェクター本体１０１（図１）の位置及び方向と、を対応付けるデータである。方向設定データ３３は、後述する角速度センサー６１または加速度センサー６２により検出される端末装置本体１１の方向や位置の変化を、プロジェクター本体１０１の方向や位置の変化に変換する場合に利用される。
例えば、方向設定データ３３は、端末装置本体１１の軸ＡＸ、ＡＹ、ＡＺのそれぞれを、軸ＰＸ、ＰＹ、ＰＺとみなすよう対応づける。この場合、端末装置本体１１が軸ＡＸに移動した場合、プロジェクター本体１０１が軸ＰＸ方向に移動したとみなされる。また、方向設定データ３３は、端末装置本体１１の位置及び方向の変化量を、プロジェクター本体１０１の位置及び変化量に変換する倍率を定めるデータを含んでもよい。
【００２５】
端末装置１０は、無線通信部４０を備える。無線通信部４０は、アンテナやＲＦ（Radio Frequency）回路（不図示）等を備え、制御部２０に接続される。無線通信部４０は、制御部２０によって制御され、プロジェクター１００との間で上述した無線通信方式に準じて各種データを送受信する。無線通信部４０は、通信制御部２２とともに送信部として機能する。
【００２６】
端末装置１０は、表示部５１を備える。表示部５１は、表示パネル５２を備え、制御部２０に接続している。表示部５１は、制御部２０から入力した画像データに基づいて、不図示の描画メモリーに表示パネル５２の表示解像度に合わせたフレームを描画し、描画したフレームに基づき表示パネル５２に画像を表示させる。
【００２７】
端末装置１０は、タッチスクリーン５３と、スイッチ部５４と、操作検出部５５とを備える。タッチスクリーン５３は、表示パネル５２への接触操作を検出して、検出した操作位置を示す位置信号を操作検出部５５に出力する。操作検出部５５は、タッチスクリーン５３から入力される位置信号に基づいて、タッチスクリーン５３上の座標を示す座標情報を生成し、制御部２０に出力する。
スイッチ部５４は、タッチスクリーン５３とは別に設けられたスイッチ等の各操作子を備え、これらのスイッチが操作された場合に操作信号を操作検出部５５に出力する。操作検出部５５は、スイッチ部５４から入力された操作信号に基づいて、操作された操作子に対応する操作情報を生成して制御部２０に出力する。
制御部２０は、操作検出部５５から入力した座標情報又は操作情報に基づいて、表示パネル５２に対する接触操作、スイッチを含む各操作子の操作、及び端末装置１０の本体を動かす操作を検出できる。
【００２８】
また、端末装置１０は、角速度センサー６１（検出部）及び加速度センサー６２（検出部）を備える。角速度センサー６１は、ジャイロセンサーとも呼ばれ、角速度を検出して検出信号を制御部２０に出力する。角速度センサー６１の仕様は特に限定されないが、端末装置本体１１（図１）のＣＸ方向、ＣＹ方向、ＣＺ方向のそれぞれにおける角速度を検出できるものであれば好ましい。加速度センサー６２は、加速度を検出して、検出信号を制御部２０に出力する。加速度センサー６２の仕様は特に限定されないが、端末装置本体１１（図１）の軸ＡＸ、軸ＡＹ、軸ＡＺ方向のそれぞれにおける加速度を検出できるものであれば好ましい。
【００２９】
制御部２０が備える表示制御部２１は、表示部５１を制御して、表示パネル５２に各種画面を表示させる。表示制御部２１は、記憶部３０から画像データ３２を読み出して、又は無線通信部４０を介して受信した画像データを表示部５１に出力する。表示部５１は、入力した画像データに基づいて、不図示の描画メモリーに表示パネル５２の表示解像度に合わせたフレームを描画し、描画したフレームに基づき表示パネル５２を駆動する。
【００３０】
動作検出部２３は、角速度センサー６１、及び加速度センサー６２から入力される検出信号に基づいて、端末装置本体１１の位置及び方向の変化を検出して、変化の方向と変化量を算出する。例えば、動作検出部２３は、端末装置本体１１の位置または方向が変化した場合に、この変化を、軸ＡＸ、軸ＡＹ、軸ＡＺのそれぞれの方向における位置変化、及び、ＣＸ方向、ＣＹ方向、ＣＺ方向のそれぞれにおける回転に分離し、各軸の移動量および各方向の回転量を出力する。ここで、位置変化は、移動あるいは変位ともいえる。例えば、端末装置本体１１が、図１に示す軸ＡＸと軸ＡＹとの間の方向に移動した場合、動作検出部２３は、この移動を軸ＡＸ方向の移動と軸ＡＹ方向の移動とに分解して、各方向の移動量を算出する。回転についても同様である。従って、端末装置本体１１の移動および回転を複数の方向の成分に分離して、移動量、回転量を算出する方法は、例えば幾何学的な演算処理など、周知の方法を利用すればよい。
【００３１】
さらに、動作検出部２３は、端末装置本体１１の各軸方向の移動量及び各軸回りの回転量を算出した場合に、方向設定データ３３に基づいて、算出した量をプロジェクター本体１０１の移動量及び回転量に変換する。本実施形態では、方向設定データ３３は、端末装置本体１１の軸ＡＸ、ＡＹ、ＡＺのそれぞれを、軸ＰＸ、ＰＹ、ＰＺとみなすよう対応づける。従って、端末装置本体１１の軸ＡＸ方向の移動は、プロジェクター本体１０１の軸ＰＸ方向への移動に変換される。また、方向設定データ３３は移動量の変換に関するデータを含んでもよい。例えば、方向設定データ３３が移動量及び回転量の倍率を含む場合、動作検出部２３は、端末装置本体１１の移動量、回転量を、方向設定データ３３の倍率に従ってプロジェクター本体１０１の移動量、回転量に変換する。
動作検出部２３は、変換により得たプロジェクター本体１０１の移動量および回転量を示す変位データを生成して、無線通信部４０を介してプロジェクター１００に送信する。
【００３２】
動作検出部２３が角速度センサー６１及び加速度センサー６２の検出信号と方向設定データ３３とに基づいて、変位データを生成する処理は、常時行ってもよいが、アプリケーションプログラム３１の機能として実装される。すなわち、制御部２０を構成するＣＰＵがアプリケーションプログラム３１を実行すると、ソフトウェア的に動作検出部２３の機能が実行可能となる。また、動作検出部２３の機能の一部を、端末装置１０のオペレーティングシステムが提供し、他の機能をアプリケーションプログラム３１が提供してもよい。
【００３３】
通信制御部２２は、無線通信部４０を制御してプロジェクター１００と無線通信を行う。通信制御部２２は、プロジェクター１００との通信を開始または終了する場合に、プロジェクター１００が備える無線通信部１５６（図３）との間で接続確立のための処理を実行する。また、通信制御部２２は、動作検出部２３が生成した変位データ等の各種のデータを無線通信部４０によりプロジェクター１００に送信し、プロジェクター１００から送信されて無線通信部４０が受信したデータを制御部２０に出力する。
例えば、方向設定データ３３に相当するデータがプロジェクター１００から送信され、このデータを無線通信部４０により受信した場合、通信制御部２２は、受信したデータを制御部２０に出力する。制御部２０は、通信制御部２２から入力されるデータを解析して、方向設定データ３３に対応するデータであると判定した場合に、データ形式の変換等を行って方向設定データ３３として記憶部３０に記憶させる。
【００３４】
図３は、プロジェクター１００の構成を示すブロック図である。
プロジェクター１００は、インターフェイス部（以下、Ｉ／Ｆと略記する）１２４を備える。プロジェクター１００は、Ｉ／Ｆ部１２４を介して画像供給装置に接続される。Ｉ／Ｆ部１２４には、例えば、デジタル映像信号が入力されるＤＶＩインターフェイス、ＵＳＢインターフェイス、ＬＡＮインターフェイス等を用いることができる。また、Ｉ／Ｆ部１２４には、例えば、ＮＴＳＣ、ＰＡＬ、ＳＥＣＡＭ等のコンポジット映像信号が入力されるＳ映像端子、コンポジット映像信号が入力されるＲＣＡ端子、コンポーネント映像信号が入力されるＤ端子等を用いることができる。さらに、Ｉ／Ｆ部１２４には、ＨＤＭＩ（登録商標）規格に準拠したＨＤＭＩコネクター等の汎用インターフェイスを用いることができる。また、Ｉ／Ｆ部１２４は、アナログ映像信号をデジタル画像データに変換するＡ／Ｄ変換回路を有し、ＶＧＡ端子等のアナログ映像端子により画像供給装置に接続される構成としてもよい。なお、Ｉ／Ｆ部１２４は、有線通信によって画像信号の送受信を行ってもよく、無線通信によって画像信号の送受信を行ってもよい。
【００３５】
プロジェクター１００は、大きく分けて光学的な画像の形成を行う投射部１１０（表示部）と、この投射部１１０に入力される画像信号を電気的に処理する画像処理系とを備える。投射部１１０は、光源部１１１、液晶パネル１１２Ａを備える光変調装置１１２及び投射光学系１１３を備える。
【００３６】
光源部１１１は、キセノンランプ、超高圧水銀ランプ、ＬＥＤ（Light Emitting Diode）、レーザー等からなる光源を備える。また、光源部１１１は、光源が発した光を光変調装置１１２に導くリフレクター及び補助リフレクターを備えていてもよい。また、光源部１１１は、投射光の光学特性を高めるためのレンズ群（図示略）、偏光板、又は光源が発した光の光量を光変調装置１１２に至る経路上で低減させる調光素子等を備えるものであってもよい。
【００３７】
光変調装置１１２は、例えば、透過型の液晶パネル１１２Ａを備え、この液晶パネル１１２Ａに後述する画像処理系からの信号を受けて画像を形成する。この場合、光変調装置１１２は、カラーの投影を行うため、ＲＧＢの三原色に対応した３枚の液晶パネル１１２Ａを備え、光源部１１１からの光はＲＧＢの３色の色光に分離され、各色光は対応する各液晶パネル１１２Ａに入射する。各液晶パネル１１２Ａを通過して変調された色光はクロスダイクロイックプリズム等の合成光学系によって合成され、投射光学系１１３に射出される。
なお、光変調装置１１２は、透過型の液晶パネル１１２Ａを３枚用いた構成に限らず、例えば３枚の反射型の液晶パネルを用いることも可能である。また、光変調装置１１２は、１枚の液晶パネルとカラーホイールを組み合わせた方式、３枚のＤＭＤ（Digital Mirror Device）を用いた方式、１枚のＤＭＤとカラーホイールを組み合わせた方式等により構成してもよい。ここで、光変調装置１１２として１枚のみの液晶パネル１１２Ａ又はＤＭＤを用いる場合には、クロスダイクロイックプリズム等の合成光学系に相当する部材は不要である。また、液晶パネル１１２Ａ及びＤＭＤ以外にも、光源が発した光を変調可能な構成であれば問題なく採用できる。
【００３８】
投射光学系１１３は、光変調装置１１２で変調された入射光を、投射レンズを用いて投射開口部１１４（図１）から外に向けて放射し、スクリーンＳＣ上に投射画像を結像させる。
【００３９】
投射部１１０には、制御部１３０の制御に従って投射光学系１１３が備える各モーターを駆動する投射光学系駆動部１２１、及び制御部１３０の制御に従って光源部１１１が備える光源を駆動する光源駆動部１２２が接続される。投射光学系駆動部１２１及び光源駆動部１２２は、バス１０５に接続される。
【００４０】
プロジェクター１００は、無線通信部１５６を備える。無線通信部１５６は、バス１０５に接続される。無線通信部１５６は、図示しないアンテナやＲＦ（Radio Frequency）回路等を備え、制御部１３０の制御の下、端末装置１０との間で無線通信規格に準拠して通信する。プロジェクター１００と端末装置１０とは、無線通信方式によって各種データを送受信可能に接続される。
【００４１】
プロジェクター１００の備える画像処理系は、プロジェクター１００全体を統合的に制御する制御部１３０を中心に構成され、その他に、記憶部１５１、画像処理部１２５、光変調装置駆動部１２３、入力処理部１５３を備える。制御部１３０、記憶部１５１、入力処理部１５３、画像処理部１２５及び光変調装置駆動部１２３は、それぞれバス１０５に接続される。
【００４２】
制御部１３０は、図示しないＣＰＵ、ＲＯＭ、ＲＡＭ等を備え、ＲＯＭに記憶した基本制御プログラムをＣＰＵにより実行して、プロジェクター１００を制御する。また、制御部１３０は、記憶部１５１に記憶されたアプリケーションプログラム３１を実行することにより、後述する投射制御部１３１、通信制御部１３２、補正制御部１３３として機能する（以下、これらを機能ブロックと呼ぶ）。補正制御部１３３は画像処理部１２５と協働して、本発明の画像処理部として機能する。
【００４３】
記憶部１５１は、フラッシュメモリー、ＥＥＰＲＯＭ等の不揮発性のメモリーである。記憶部１５１は、プロジェクター１００の制御に使用される制御プログラムや、画像データ等を記憶する。また、記憶部１５１は、方向設定データ１６１及び補正データ１６２を記憶する。方向設定データ１６１は、端末装置本体１１（図１）とプロジェクター本体１０１（図１）との位置および方向を対応付けるデータである。方向設定データ１６１が示す対応付けは、例えば、リモコン（図示略）または操作パネル１５５の操作により入力され、或いは、初期値として予めプロジェクター１００が記憶する。また、Ｉ／Ｆ部１２４に接続される図示しないコンピューター等により、方向設定データ１６１が入力されてもよい。補正データ１６２は、端末装置１０から送信される変位データに基づいて、プロジェクター１００が投射する投射画像２０１を補正するためのデータである。具体的には、補正データ１６２は、変位データから補正用のパラメーターを生成するためのテーブル、演算式、パラメーター等である。
【００４４】
画像処理部１２５は、Ｉ／Ｆ部１２４から入力される画像データを、光変調装置１１２の液晶パネル１１２Ａの仕様に適合した解像度のデータに変換する解像度変換処理等を実行する。画像処理部１２５は、光変調装置１１２により表示する表示用画像をフレームメモリー１２６に描画して、描画した表示用画像を光変調装置駆動部１２３に出力する。光変調装置駆動部１２３は、画像処理部１２５から入力した表示用画像に基づいて、光変調装置１１２を駆動する。これにより、光変調装置１１２の液晶パネル１１２Ａに画像が描画され、描画された画像が、投射光学系１１３を介してスクリーンＳＣ上に投射画像２０１として投射される。
【００４５】
また、画像処理部１２５は、フレームメモリー１２６に描画した画像を変形させることにより、投射画像２０１の台形歪みを補正する補正処理を実行する。補正処理では、いわゆる樽型歪み（糸巻き型歪み）を補正してもよい。補正処理は、プロジェクター１００とスクリーンＳＣとの位置関係等に起因する投射画像２０１の歪みを補正して、スクリーンＳＣ上の投射画像２０１を適切な形状にする処理である。また、画像処理部１２５は、画像の拡大、縮小、回転等の変形処理を実行する。画像処理部１２５は、方向設定データ３３から入力されるパラメーターに従って、変形処理および補正処理を実行する。
【００４６】
プロジェクター１００の本体には、ユーザーが操作を行うための各種スイッチ及びインジケーターランプを備える操作パネル１５５が配置される。操作パネル１５５は、入力処理部１５３に接続される。入力処理部１５３は、制御部１３０の制御に従い、プロジェクター１００の動作状態や設定状態に応じて操作パネル１５５のインジケーターランプを適宜点灯或いは点滅させる。操作パネル１５５のスイッチが操作されると、操作されたスイッチに対応する操作信号が入力処理部１５３から制御部１３０に出力される。
また、プロジェクター１００は、ユーザーが使用するリモコン（不図示）を有する。リモコンは各種のボタンを備えており、これらのボタンの操作に対応して赤外線信号を送信する。プロジェクター１００の本体には、リモコンが発する赤外線信号を受光するリモコン受光部１５４が配置される。リモコン受光部１５４は、リモコンから受光した赤外線信号をデコードして、リモコンにおける操作内容を示す操作信号を生成し、制御部１３０に出力する。
【００４７】
次に、制御部１３０の備える機能ブロックについて説明する。
投射制御部１３１は、画像処理部１２５を制御して、Ｉ／Ｆ部１２４を介して画像供給装置から供給された画像データに基づいてフレームメモリー１２６に画像を描画させる。また、投射制御部１３１は、光変調装置駆動部１２３を制御して、フレームメモリー１２６に描画された画像を光変調装置１１２の液晶パネル１１２Ａに描画させる。光変調装置１１２の液晶パネル１１２Ａに描画された画像が、投射光学系１１３を介してスクリーンＳＣ上に投射画像２０１として投射される。
【００４８】
通信制御部１３２は、無線通信部４０を制御して端末装置１０と無線通信を行う。通信制御部１３２は、端末装置１０に接続されると、端末装置１０から送信される変位データを受信する。ここで、端末装置１０が変位データを送信すると、通信制御部１３２は、無線通信部１５６によって変位データを受信し、補正制御部１３３に渡す。
また、通信制御部１３２は、端末装置１０から送信される要求に従って、記憶部１５１に記憶された方向設定データ１６１を、端末装置１０に送信する。端末装置１０では、方向設定データ１６１に基づき方向設定データ３３（図２）が生成され、記憶部３０（図２）に記憶される。
【００４９】
補正制御部１３３は、通信制御部１３２から入力される変位データに基づいて、投射画像２０１に対して実行する処理を決定し、処理に要するパラメーターを、変位データと補正データ１６２とに基づいて生成する。本実施形態において、補正制御部１３３が決定する処理は、補正処理及び変形処理の少なくともいずれかである。変形処理に関するパラメーターは、例えば、拡大率、縮小率、回転方向と回転量であり、補正処理に関するパラメーターは、補正の前後における座標の対応付けを示すテーブルや演算式、及び、補正後の画像を構成する画素の画素値を求めるためのテーブル等である。変形処理は、画像の表示倍率の変更、すなわち画像の拡大および画像の縮小を含み、そのほかに、画像の回転を含む。
補正制御部１３３は、決定した処理を示す制御データとパラメーターとを画像処理部１２５に出力し、画像処理部１２５によって補正処理と変形処理とを実行させる。
【００５０】
図４は、プロジェクター１００及び端末装置の処理手順を示すフローチャートである。図４（ａ）はプロジェクター１００の動作を示し、（ｂ）は端末装置１０の動作を示す。
プロジェクター１００は、外部の画像供給装置からＩ／Ｆ部１２４に入力される画像データに基づいて、投射部１１０によってスクリーンＳＣに画像を投射する（ステップＳ１１）。ステップＳ１１では、投射制御部１３１の制御により画像処理部１２５が画像を描画して画像信号を光変調装置駆動部１２３に出力する処理を行い、光源駆動部１２２が光源部１１１を点灯させ、光変調装置駆動部１２３が液晶パネル１１２Ａに画像を描画する。
【００５１】
端末装置１０では、ユーザーがタッチスクリーン５３にタッチ操作を行うことにより、アプリケーションプログラム３１が実行される（ステップＳ２１）。アプリケーションプログラム３１の機能によって、端末装置１０が備える無線通信部４０は、プロジェクター１００の無線通信部１５６に対して接続要求を送信し（ステップＳ２２）、相互に所定のネゴシエーションを行う（ステップＳ１２、Ｓ２２）。これにより、端末装置１０とプロジェクター１００との間の無線通信の接続が確立される。
【００５２】
次いで、動作検出部２３は、表示パネル５２に開始画面を表示する。この開始画面は、端末装置本体１１の位置や方向を変化させる操作、すなわち端末装置本体１１を動かす操作によって投射画像２０１を制御する機能を開始する画面である。
図５は、端末装置１０の表示パネル５２に表示される画像の例を示す図であり、（ａ）は開始画面の例を示し、（ｂ）は処理実行中に表示される画面を示し、（ｃ）は終了通知画面を示す。
【００５３】
図５（ａ）に示すように、ステップＳ２３で表示される開始画面には、方向案内画像２１０が表示される。方向案内画像２１０は、プロジェクター本体１０１の形状を模した画像となっている。また、方向案内画像２１０におけるプロジェクター本体１０１の向きは、方向設定データ３３で設定された対応付けに一致する。図１を参照して説明したように、本実施形態では、端末装置本体１１の軸ＡＸ、ＡＹ、ＡＺがプロジェクター本体１０１の軸ＰＸ、ＰＹ、ＰＺに重なるように対応付けられる。表示パネル５２は、軸ＡＸ及び軸ＡＹに平行な平面に相当する。このため、方向案内画像２１０は、表示パネル５２において、軸ＡＸに軸ＰＸが重なり、軸ＡＹに軸ＰＹが重なった状態を示す画像となっている。
【００５４】
また、図５（ａ）の開始画面には開始ボタン２１５が配置される。開始ボタン２１５は、端末装置本体１１の移動による画像の補正、変形の処理の開始を指示するボタンである。
【００５５】
図４（ｂ）のステップＳ２３で開始画面を表示した後、動作検出部２３は、開始ボタン２１５の操作があるまで待機し（ステップＳ２４；Ｎｏ）、開始ボタン２１５が操作されたことを検出すると（ステップＳ２４；Ｙｅｓ）、処理を開始する。
このとき、表示パネル５２に表示される画像は、図５（ｂ）に示すように切り替わる。図５（ｂ）の表示では開始ボタン２１５が消え、変わって終了ボタン２１６が配置される。終了ボタン２１６は処理の終了を指示するボタンである。また、この図５（ｂ）の画面においても方向案内画像２１０が引き続き表示される。
【００５６】
処理を開始した動作検出部２３は、角速度センサー６１及び加速度センサー６２の検出信号に基づいて、端末装置本体１１の初期位置を検出する（ステップＳ２４）。この初期位置は、端末装置本体１１の位置及び方向の基準となる位置である。動作検出部２３は、加速度センサー６２の検出値に基づいて、水平に対するＡＸ−ＡＹ平面の角度を求めることが可能であるし、例えば端末装置１０が方角を検出する地磁気センサーを具備する場合には軸ＡＸの方角を検出できる。
次いで、動作検出部２３は、角速度センサー６１及び加速度センサー６２の検出信号に基づいて、端末装置本体１１の位置及び方向について、初期位置に対する変化を検出する（ステップＳ２６）。動作検出部２３は、検出した変化に基づき変位データを生成して、通信制御部２２によってプロジェクター１００に送信させる（ステップＳ２７）。
【００５７】
通信制御部１３２は、端末装置１０から送信された変位データを無線通信部１５６により受信すると（ステップＳ１３）、受信した変位データを補正制御部１３３に渡す。
補正制御部１３３は、記憶部１５１に記憶された補正データ１６２を参照し、変位データに基づいて、処理内容を決定し、パラメーターを生成する（ステップＳ１４）。そして、補正制御部１３３は処理内容を示す制御データとパラメーターとを画像処理部１２５に出力して、画像処理部１２５に処理を実行させる（ステップＳ１５）。
【００５８】
図６は、画像処理部１２５により実行される画像処理の具体例を示す図である。
図６（ａ）は適正な形状の投射画像２０１を示し、適正な投射状態においてはスクリーンＳＣ上の投射画像２０１は矩形となる。これに対し、スクリーンＳＣの上方からプロジェクター１００が投射する場合、すなわちプロジェクター１００が投射する画像光が水平面に対して傾いている場合、図６（ｂ）のように投射画像２０１が台形に歪む。
【００５９】
表示システム１では、端末装置本体１１を動かす操作を行った場合に、この操作を、プロジェクター本体１０１を動かす操作に変換し、プロジェクター本体１０１が動いた場合に相当する画像処理を行う。
図６（ｂ）のような台形歪みを補正する場合、端末装置本体１１を軸ＡＹ回り（ＣＹ方向）に回転させて、軸ＡＸを上向きにする操作が行われる。動作検出部２３は、端末装置本体１１のＣＹ方向の回転を、プロジェクター本体１０１のＱＹ方向の回転に変換する。図６（ｂ）ではプロジェクター１００の画像光が下向きになっているから、これを上向きにすれば、台形歪みが収まる。端末装置本体１１を上向きに回転させる動作が、プロジェクター本体１０１の画像光を上向きにする動作に変換されて、変位データとしてプロジェクター１００に送信される。
【００６０】
また、表示システム１では、端末装置本体１１の軸がプロジェクター本体１０１の軸に重なるだけでなく、端末装置本体１１の長手方向の一端と、プロジェクター本体１０１の前端（投射開口部１１４側）とが対応付けられる。さらに、表示パネル５２と、プロジェクター本体１０１の上面とが対応付けられる。この対応付けは方向設定データ３３、１６１により設定されていて、この対応付けに従って方向案内画像２１０が表示される。従って、端末装置本体１１が軸ＡＹ回りに回転した場合に、プロジェクター本体１０１の画像光が上向きになるのか下向きになるのかは速やかに特定される。
【００６１】
本実施形態では、プロジェクター本体１０１を実際に回転させることはない。補正制御部１３３は、プロジェクター本体１０１の回転を示す変位データが端末装置１０から送信された場合、プロジェクター本体１０１を回転させた場合と同様に投射画像２０１を変形させる。従って、図６（ｂ）の台形歪みを有する画像は、図６（ａ）のように適切な形状に補正される。
【００６２】
この場合、ユーザーは、プロジェクター本体１０１が下向きになっているために台形歪みを生じていることを視認して、プロジェクター本体１０１を上向きにするように、端末装置本体１１を操作する。端末装置本体１１を実際にどの方向に動かすかは、方向案内画像２１０を見れば簡単に理解できる。このため、直感的に端末装置本体１１を動かすことで、投射画像２０１の歪みを補正できる。例えば、誤って逆方向に端末装置本体１１を動かして、歪みが拡大する等の不具合を防止でき、操作性を向上できる。
【００６３】
図６（ｃ）は、プロジェクター１００が投射する画像光がスクリーンＳＣに対して水平方向に傾いている場合の投射画像２０１の例を示す。この例では、スクリーンＳＣに向かって右側からプロジェクター１００が投射する。プロジェクター本体１０１を動かすことで図６（ｃ）の台形歪みを解消する場合には、プロジェクター本体１０１を、軸ＰＺ回り（ＱＺ方向）に回転させればよい。そこで、ユーザーは、端末装置本体１１を、軸ＡＺ回り（ＣＺ方向）に回転させる。これにより、端末装置本体１１の回転に応じて、プロジェクター本体１０１の回転を示す変位データが端末装置１０からプロジェクター１００に送信され、補正制御部１３３が画像の台形補正を行う。
【００６４】
画像処理部１２５が台形歪みを補正するためには画像の変形（幾何補正）に関するテーブル、演算式、パラメーターを必要とするが、これらは補正データ１６２と変位データとに基づいて補正制御部１３３が生成する。
このように、端末装置本体１１を動かすことで、あたかもプロジェクター本体１０１を動かすように投射画像２０１を変形させて、台形歪みを補正できる。また、図６（ｂ）と（ｃ）の台形歪みだけでなく、上下方向の傾きと左右方向の傾きとが複合した台形歪みに対しても、端末装置本体１１を動かすことで補正できる。
【００６５】
補正制御部１３３及び画像処理部１２５が実行する画像の変形は台形歪みを補正する補正処理に限定されず、拡大、縮小、回転等の変形処理が可能である。
図６（ｄ）には投射画像２０１を回転させる変形処理を示し、（ｅ）には投射画像２０１を拡大、縮小する変形処理を示す。
端末装置本体１１を、軸ＡＸ回り（ＣＸ方向）に回転させると、動作検出部２３は、プロジェクター本体１０１を光軸回りに回転させた場合に相当する変位データを生成する。補正制御部１３３は、画像処理部１２５によって画像を回転させ、例えば図（ｄ）に符号Ｅで示すように、投射画像２０１を回転させることができる。この場合も、端末装置本体１１を動かすことで、プロジェクター本体１０１が動いたように投射画像２０１が変形される。
【００６６】
また、端末装置本体１１を軸ＡＸに沿って移動させる操作が行われると、プロジェクター本体１０１が光軸に沿って移動するように、投射画像２０１が変形される。プロジェクター本体１０１が光軸に沿って移動した場合、スクリーンＳＣに近づくように移動すれば投射画像２０１は小さくなり、スクリーンＳＣから離れるように移動すれば投射画像２０１は大きくなる。補正制御部１３３は、変位データに基づいて、画像処理部１２５によって画像を拡大または縮小させ、これにより投射画像２０１は、例えば図６（ｅ）に符号Ｆで示すように拡大され、或いは符号Ｇで示すように縮小される。ここで、端末装置本体１１の移動が軸ＡＸに沿った移動だけであれば、投射画像２０１は、中心を動かさずに拡大、縮小される。端末装置本体１１が、軸ＡＹ方向や軸ＡＺ方向にも移動した場合には、この軸ＡＹ方向や軸ＡＺ方向の移動量に対応して、投射画像２０１の中心が移動される。
【００６７】
図４の説明に戻る。動作検出部２３は、変位データをプロジェクター１００に送信した後、表示パネル５２に表示された終了ボタン２１６が操作されたか否かを判別する（ステップＳ２８）。終了ボタン２１６が操作されていない場合は（ステップＳ２８；Ｎｏ）、ステップＳ２６に戻って端末装置本体１１の位置、方向の変化を検出する。ステップＳ２６の処理を最初に行う場合は、ステップＳ２５で検出した初期位置を基準として端末装置本体１１の位置、方向の変化を検出したが、２回目以後は、前回のステップＳ２６で検出した端末装置本体１１の位置及び方向を基準とする。
【００６８】
終了ボタン２１６が操作された場合、動作検出部２３は、通信制御部２２によってプロジェクター１００に終了を通知する（ステップＳ２９）。
一方、補正制御部１３３は、端末装置１０から終了が通知されたか否かを判定し（ステップＳ１６）、終了が通知されない間は（ステップＳ１６；Ｎｏ）、ステップＳ１３に戻って変位データの受信を待機する。通信制御部１３２が終了の通知の制御データを受信し、終了が通知された場合（ステップＳ１６；Ｙｅｓ）、通信制御部１３２と通信制御部２２とが、無線通信部１５６と無線通信部４０とを制御して通信終了の処理をする（ステップＳ１７，Ｓ３０）。
【００６９】
その後、補正制御部１３３は、変形した画像の状態を確定する（ステップＳ１８）。これにより、液晶パネル１１２Ａに形成される画像の形状が固定され、投射画像２０１の形状は補正処理、変形処理がされた後の形状を維持する。
また、端末装置１０では、アプリケーションプログラム３１の実行が終了される（ステップＳ３１）。
【００７０】
端末装置１０において、終了ボタン２１６が操作された場合（ステップＳ２８；Ｙｅｓ）、表示パネル５２に表示される画面が、図５（ｃ）の終了通知画面に切り替えられる。この終了通知画面には終了通知画像２１７が表示され、端末装置本体１１を動かす操作の終了を、ユーザーに通知する。
【００７１】
また、上記実施形態において、補正制御部１３３は、補正データ１６２を参照し、変位データに基づいて、投射光学系駆動部１２１を駆動することにより、投射光学系１１３のフォーカス調整を実行してもよい。例えば、端末装置本体１１を軸ＡＸ回り、軸ＡＹ回り、或いは軸ＡＺ回りに回転させる操作に対応する変位データをもとに、投射光学系１１３のフォーカスを移動させて調整を行う。この場合、端末装置本体１１を動かす操作によりフォーカス調整を行うことができる。
【００７２】
以上、説明したように、本実施形態に係る表示システム１は、プロジェクター１００と、端末装置１０と、を備える。端末装置１０は、端末装置１０の位置および向きの少なくともいずれかを検出する検出部としての角速度センサー６１及び加速度センサー６２を備える。端末装置１０は、端末装置１０の位置とプロジェクター１００の位置との対応付け、および、端末装置１０の向きとプロジェクター１００の向きとの対応付けのうち、少なくともいずれかを示す方向案内画像２１０を表示する。プロジェクター１００は、端末装置１０の位置または向きの変化に応じて、投射部１１０が投射する投射画像２０１を変形させる。このため、端末装置本体１１とプロジェクター本体１０１の対応付け等の設定を知らないユーザーであっても、端末装置１０を操作することによって、投射画像２０１を所望の状態に変形させることができ、操作性の向上を図ることができる。
ここで、端末装置１０では、端末装置本体１１の位置と投射部１１０の位置との対応付け、および、端末装置本体１１の向きと投射部１１０の向きとの対応付けのうち、少なくともいずれかが予め設定されてもよい。端末装置１０は、設定された対応付けを示す方向案内画像２１０を端末装置１０の表示パネル５２に表示してもよい。また、端末装置１０は、端末装置本体１１の位置および向きの少なくともいずれかを検出し、プロジェクター１００により、端末装置本体１１の位置または向きの変化を、投射部１１０の位置または向きの変化とみなして、投射画像２０１を変形させてもよい。
【００７３】
また、端末装置１０の動作検出部２３は、角速度センサー６１、加速度センサー６２の検出結果を、プロジェクター本体１０１の位置または向きの変化に変換し、変換結果である変位データを無線通信部４０によってプロジェクター１００に送信する。プロジェクター１００は、端末装置１０から送信される変位データに従って投射画像２０１を変形させる補正制御部１３３を備える。このため、端末装置１０により検出された端末装置本体１１の位置または向きが、プロジェクター本体１０１の位置または向きに変換されて、プロジェクター１００に送信される。このため、プロジェクター１００が投射画像２０１を変化させる処理の負荷を軽減し、処理の効率化を図ることができる。
【００７４】
また、端末装置１０は、角速度センサー６１、加速度センサー６２の検出開始または検出終了を、表示パネル５２に開始ボタン２１５や終了通知画像２１７を表示することによって報知する。このため、端末装置１０を操作するユーザーに対して、検出の開始あるいは終了を通知することができ、より一層、操作性を高めることができる。
【００７５】
また、プロジェクター１００は、投射対象に画像光を投射する投射部１１０を備え、プロジェクター１００の光軸方向と端末装置１０が備える表示パネル５２の長手方向とが重なるように、端末装置本体１１の向きと投射部１１０の向きとが対応付けられる。このため、端末装置１０の位置または方向が変化した場合に、表示パネル５２の長手方向がプロジェクター１００の光軸に対応するように、投射画像２０１が変化するので、ユーザーが直感的に操作を行うことができる。
【００７６】
プロジェクター１００は、端末装置本体１１の位置または向きの変化を、投射部１１０の位置または向きの変化とみなして、投射部１１０が投射する画像の台形歪み補正、表示倍率の変更、フォーカス調整の少なくともいずれかを実行する。このため、プロジェクターが投射する画像の台形歪み補正、表示倍率の変更すなわち拡大、縮小、及び、フォーカス調整に関する操作を、端末装置１０を用いて容易に行うことができる。
【００７７】
端末装置１０は、表示パネル５２の長手方向に略直交する軸ＡＹ方向または軸ＡＺ方向に平行な軸を中心とした端末装置本体１１の回転量を検出する。プロジェクター１００は、端末装置１０で検出された端末装置本体１１の回転量に基づいて、投射画像２０１の台形歪み補正を実行する。このため、端末装置本体１１を、表示パネル５２の長手方向に略直交する方向を軸として回転させることにより、投射画像２０１の台形歪み補正が実行される。このため、端末装置１０の操作方法を増やして多機能化を図ることができ、操作性を向上させることができる。
また、端末装置１０は、端末装置本体１１の軸ＡＸ方向における移動を検出し、プロジェクター１００は、端末装置１０で検出された端末装置１０の移動に対応して、投射部１１０が投射する画像を拡大または縮小する。このため、端末装置１０を、表示パネル５２の長手方向に移動させる操作により、画像の表示倍率を変更させることができ、表示倍率に係る操作を直感的に行うことができる。
【００７８】
なお、上述した実施形態は、本発明の好適な実施形態の一例を示すものであり、本発明の実施態様はこれに限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形実施が可能である。例えば、上記実施形態では、端末装置本体１１の軸ＡＸ、ＡＹ、ＡＺがプロジェクター本体１０１の軸ＰＸ、ＰＹ、ＰＺに重なるように、対応付けがされた例を説明した。本発明はこれに限定されるものではなく、端末装置本体１１の軸ＡＸ、ＡＹ、ＡＺのそれぞれと、プロジェクター本体１０１の軸ＰＸ、ＰＹ、ＰＺのそれぞれとが、平行になるように、対応付けがされれば、上記実施形態と同様の効果が得られる。また、動作検出部２３が検出する端末装置本体１１の位置または方向、或いはこれらの変化は、軸ＡＸ、ＡＹ、ＡＺを基準とした方法に限定されない。端末装置本体１１に対して極座標を設定し、この極座標に基づく位置または方向の変化を検出してもよく、端末装置本体１１の立体的な変位を特定できる方法であれば本発明を適用可能である。プロジェクター本体１０１の位置または方向を特定する方法についても同様である。
【００７９】
また、上記実施形態では、端末装置本体１１の位置及び方向の検出を開始する際に、表示パネル５２に開始ボタン２１５を表示して、開始を指示する操作を可能とするとともに、開始の報知をする例を示したが、本発明はこれに限定されない。すなわち、ステップＳ２３で、開始ボタン２１５に代えて、検出の開始を報知する画像を表示し、開始を指示する操作なしに検出を開始してもよい。この場合も、ユーザーに対して検出開始を知らせることが可能である。
【００８０】
また、例えば、上記実施形態では、スクリーンＳＣの前方から投射するフロントプロジェクション型のプロジェクター１００を表示装置の一例として示したが、本発明はこれに限定されない。例えば、スクリーンＳＣの背面側から投射するリアプロジェクション（背面投射）型のプロジェクターを表示装置として採用できる。また、液晶表示パネルに画像を表示する液晶モニターまたは液晶テレビを表示装置として採用してもよい。ＰＤＰ（プラズマディスプレイパネル）、ＣＲＴ（陰極線管）ディスプレイ、ＳＥＤ（Surface-conduction Electron-emitter Display）等を表示装置として用いてもよい。また、ＯＬＥＤ（Organic light-emitting diode）、ＯＥＬ（Organic Electro Luminescence）ディスプレイ等と呼ばれる有機ＥＬ表示パネルに画像を表示するモニター装置またはテレビ受像機等の自発光型の表示装置を採用してもよい。これらの表示装置を備える構成において本発明を適用した場合も、上記実施形態と同様に、有用な効果が得られる。
【００８１】
また、本発明の入力装置は、上記実施形態では、端末装置として、平板状の端末装置本体１１を有し、ユーザーが手に持って操作する携帯型の端末装置１０を例に挙げて説明したが、本発明はこれに限定されない。すなわち、上記実施形態の端末装置１０は、ユーザーが手指を接触させて操作が可能なタッチスクリーン５３と表示パネル５２とを備えることで、直感的な操作が可能であり、高い操作性を有するという利点がある。その一方で、表示画面を備える装置であれば本発明を適用可能であり、例えば携帯型ゲーム機、音楽や映像を再生する携帯型再生装置等を用いることができる。
【００８２】
また、図２及び図３に示した各機能部は機能的構成を示すものであって、具体的な実装形態は特に制限されない。つまり、必ずしも各機能部に個別に対応するハードウェアが実装される必要はなく、一つのプロセッサーがプログラムを実行することで複数の機能部の機能を実現する構成とすることも勿論可能である。また、上記実施形態においてソフトウェアで実現される機能の一部をハードウェアで実現してもよく、あるいは、ハードウェアで実現される機能の一部をソフトウェアで実現してもよい。その他、表示システム１の他の各部の具体的な細部構成についても、本発明の趣旨を逸脱しない範囲で任意に変更可能である。
【符号の説明】
【００８３】
１…表示システム、１０…端末装置、１１…端末装置本体（本体）、２０…制御部、２１…表示制御部、２２…通信制御部（送信部）、２３…動作検出部（制御部）、３０…記憶部、３１…アプリケーションプログラム、３３…方向設定データ、４０…無線通信部（送信部）、５１…表示部、５２…表示パネル（表示画面）、５３…タッチスクリーン、５５…操作検出部、６１…角速度センサー（検出部）、６２…加速度センサー（検出部）、１００…プロジェクター（表示装置）、１０１…プロジェクター本体（本体）、１１０…投射部（表示部）、１１１…光源部、１１２…光変調装置、１１２Ａ…液晶パネル、１１３…投射光学系、１１４…投射開口部、１２１…投射光学系駆動部、１２２…光源駆動部、１２３…光変調装置駆動部、１２４…Ｉ／Ｆ部、１２５…画像処理部、１２６…フレームメモリー、１３０…制御部、１３１…投射制御部、１３２…通信制御部、１３３…補正制御部（画像処理部）、１５１…記憶部、１５６…無線通信部、１６１…方向設定データ、１６２…補正データ、２０１…投射画像、２１０…方向案内画像、２１５…開始ボタン、２１６…終了ボタン、２１７…終了通知画像、ＡＸ、ＡＹ、ＡＺ…軸、ＰＸ、ＰＹ、ＰＺ…軸、ＳＣ…スクリーン。
【図１】
2015220732.tif 000003
【図２】
2015220732.tif 000004
【図３】
2015220732.tif 000005
【図４】
2015220732.tif 000006
【図５】
2015220732.tif 000007
【図６】
2015220732.tif 000008