(57)【要約】【課題】赤外光を発する指示体（自発光型指示体）および自ら光を発しない指示体（非発光型指示体）の両方について検出を行う。【解決手段】プロジェクターは、投写面に画像を投写する投写部と、前記投写面を含む領域を撮像領域とし、可視光を撮像する第１の撮像部および第２の撮像部と、前記投写面を含む領域を撮像領域とし、赤外光を撮像する第３の撮像部と、前記第１の撮像部および前記第２の撮像部による撮像結果に基づいて、非発光型指示体の位置を検出する第１検出部と、前記第３の撮像部による撮像結果に基づいて、赤外光を発する発光部を有する自発光型指示体の位置を検出する第２検出部と、を備える。【選択図】図１
2016184850.tif 000002
【特許請求の範囲】
【請求項１】
投写面に画像を投写する投写部と、
前記投写面を含む領域を撮像領域とし、可視光を撮像する第１の撮像部および第２の撮像部と、
前記投写面を含む領域を撮像領域とし、赤外光を撮像する第３の撮像部と、
前記第１の撮像部および前記第２の撮像部による撮像結果に基づいて、非発光型指示体の位置を検出する第１検出部と、
前記第３の撮像部による撮像結果に基づいて、赤外光を発する発光部を有する自発光型指示体の位置を検出する第２検出部と、
を備えるプロジェクター。
【請求項２】
前記第１の撮像部および前記第２の撮像部のうちの少なくとも一方は、可視光を撮像する機能および赤外光を撮像する機能を切り替えることが可能な撮像部であり、前記第３の撮像部も構成する、
請求項１に記載のプロジェクター。
【請求項３】
前記第１の撮像部による撮像結果および前記第２の撮像部による撮像結果のうちの少なくとも一方に基づいて、前記非発光型指示体または前記自発光型指示体で指示された部分の色を検出する色検出部をさらに備える、
請求項１または請求項２のいずれか１項に記載のプロジェクター。
【請求項４】
前記第１の撮像部による撮像結果および前記第２の撮像部による撮像結果のうちの少なくとも一方に基づいて、前記非発光型指示体または前記自発光型指示体で指示された部分の図形を検出する図形検出部をさらに備える、
請求項１から請求項３のいずれか１項に記載のプロジェクター。
【請求項５】
前記第１の撮像部による撮像結果および前記第２の撮像部による撮像結果のうちの少なくとも一方に基づいて、前記自発光型指示体の態様を検出する態様検出部をさらに備える、
請求項１から請求項４のいずれか１項に記載のプロジェクター。
【請求項６】
撮像領域内の熱分布の画像を撮像するサーモグラフィーカメラを備え、
前記第１検出部は、前記第１の撮像部、前記第２の撮像部および前記サーモグラフィーカメラによる撮像結果に基づいて、前記非発光型指示体の位置を検出する、
請求項１から請求項５のいずれか１項に記載のプロジェクター。
【請求項７】
プロジェクターにおいて、
投写面に画像を投写し、
第１の撮像部および第２の撮像部が、前記投写面を含む領域を撮像領域とし、可視光を撮像し、
第３の撮像部が、前記投写面を含む領域を撮像領域とし、赤外光を撮像し、
前記第１の撮像部および前記第２の撮像部による撮像結果に基づいて、非発光型指示体の位置を検出し、
前記第３の撮像部による撮像結果に基づいて、赤外光を発する発光部を有する自発光型指示体の位置を検出する、
検出方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、プロジェクターおよび検出方法に関する。
【背景技術】
【０００２】
コンピューターから出力される画像信号に基づく画像などを、プロジェクターによってホワイトボード等のスクリーンに投写するとともに、投写された画像を撮像装置で撮像し、投写画像に対してユーザーが行った操作をコンピューターなどで認識するインタラクティブシステムが知られている。このようなインタラクティブシステムでは、プロジェクターおよびユーザーが扱う電子ペンにより赤外光の送受信が行われる（例えば、特許文献１参照。）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１４−５９６９５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、プロジェクターに赤外カメラを備えて、当該赤外カメラにより電子ペンからの赤外光を受信する場合、赤外光を発しない人間の指などを検出することができなかった。
なお、これを解消するために、スクリーンの前に赤外光のカーテン（ライトカーテン）を形成するライトカーテン装置を設置して、指などによる当該赤外光の反射光を赤外カメラで受信することが提案されている。これにより、プロジェクターでは、赤外光を発する電子ペンばかりでなく、赤外光を発しない指などを認識することが可能となる。しかしながら、プロジェクターの配置によっては、ライトカーテン装置を設置するスペースが無い場合もあり、また、ライトカーテンを形成する赤外光を発し続けるために大きな電力が消費される場合があった。
【０００５】
本発明は、前記の点に鑑み為されたものであり、赤外光を発する指示体（自発光型指示体）および自ら光を発しない指示体（非発光型指示体）の両方について検出を行うことができるプロジェクターおよび検出方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の一態様は、上記の課題を解決するためになされたものであり、投写面に画像を投写する投写部と、前記投写面を含む領域を撮像領域とし、可視光を撮像する第１の撮像部および第２の撮像部と、前記投写面を含む領域を撮像領域とし、赤外光を撮像する第３の撮像部と、前記第１の撮像部および前記第２の撮像部による撮像結果に基づいて、非発光型指示体の位置を検出する第１検出部と、前記第３の撮像部による撮像結果に基づいて、赤外光を発する発光部を有する自発光型指示体の位置を検出する第２検出部と、を備えるプロジェクターである。
この構成により、プロジェクターでは、可視光を撮像する第１の撮像部および第２の撮像部による撮像結果に基づいて非発光型指示体の位置を検出し、赤外光を撮像する第３の撮像部による撮像結果に基づいて自発光型指示体の位置を検出する。これにより、プロジェクターでは、自発光型指示体および非発光型指示体の両方について検出を行うことができる。
【０００７】
本発明の一態様は、プロジェクターにおいて、前記第１の撮像部および前記第２の撮像部のうちの少なくとも一方は、可視光を撮像する機能および赤外光を撮像する機能を切り替えることが可能な撮像部であり、前記第３の撮像部も構成する、構成が用いられてもよい。
この構成により、プロジェクターでは、可視光を撮像する機能および赤外光を撮像する機能を切り替えることが可能な撮像部により、可視光を撮像し、赤外光を撮像する。これにより、プロジェクターでは、可視光を撮像する撮像部と赤外光を撮像する撮像部を別々に備える場合と比べて小型化を図ることができる。
【０００８】
本発明の一態様は、プロジェクターにおいて、前記第１の撮像部による撮像結果および前記第２の撮像部による撮像結果のうちの少なくとも一方に基づいて、前記非発光型指示体または前記自発光型指示体で指示された部分の色を検出する色検出部をさらに備える、構成が用いられてもよい。
この構成により、プロジェクターでは、第１の撮像部による撮像結果および第２の撮像部による撮像結果のうちの少なくとも一方に基づいて、非発光型指示体または自発光型指示体で指示された部分の色を検出する。これにより、プロジェクターでは、非発光型指示体または自発光型指示体で色を指示することを可能とすることができる。
【０００９】
本発明の一態様は、プロジェクターにおいて、前記第１の撮像部による撮像結果および前記第２の撮像部による撮像結果のうちの少なくとも一方に基づいて、前記非発光型指示体または前記自発光型指示体で指示された部分の図形を検出する図形検出部をさらに備える、構成が用いられてもよい。
この構成により、プロジェクターでは、第１の撮像部による撮像結果および第２の撮像部による撮像結果のうちの少なくとも一方に基づいて、非発光型指示体または自発光型指示体で指示された部分の図形を検出する。これにより、プロジェクターでは、非発光型指示体または自発光型指示体で図形を指示することを可能とすることができる。
【００１０】
本発明の一態様は、プロジェクターにおいて、前記第１の撮像部による撮像結果および前記第２の撮像部による撮像結果のうちの少なくとも一方に基づいて、前記自発光型指示体の態様を検出する態様検出部をさらに備える、構成が用いられてもよい。
この構成により、プロジェクターでは、第１の撮像部による撮像結果および第２の撮像部による撮像結果のうちの少なくとも一方に基づいて自発光型指示体の態様を検出する。これにより、プロジェクターでは、自発光型指示体の発光部から赤外光が発せられなくても、当該自発光型指示体の発光部の態様を検出することが可能である。
【００１１】
本発明の一態様は、プロジェクターにおいて、撮像領域内の熱分布の画像を撮像するサーモグラフィーカメラを備え、前記第１検出部は、前記第１の撮像部、前記第２の撮像部および前記サーモグラフィーカメラによる撮像結果に基づいて、前記非発光型指示体の位置を検出する、構成が用いられてもよい。この構成により、プロジェクターでは、非発光型指示体の位置の検出精度を高めることができる。
【００１２】
本発明の一態様は、上記の課題を解決するためになされたものであり、プロジェクターにおいて、投写面に画像を投写し、第１の撮像部および第２の撮像部が、前記投写面を含む領域を撮像領域とし、可視光を撮像し、第３の撮像部が、前記投写面を含む領域を撮像領域とし、赤外光を撮像し、前記第１の撮像部および前記第２の撮像部による撮像結果に基づいて、非発光型指示体の位置を検出し、前記第３の撮像部による撮像結果に基づいて、赤外光を発する発光部を有する自発光型指示体の位置を検出する、検出方法である。
この構成により、検出方法では、プロジェクターにおいて、可視光を撮像する第１の撮像部および第２の撮像部による撮像結果に基づいて非発光型指示体の位置を検出し、赤外光を撮像する第３の撮像部による撮像結果に基づいて自発光型指示体の位置を検出する。これにより、検出方法では、プロジェクターにおいて、自発光型指示体および非発光型指示体の両方について検出を行うことができる。
【００１３】
以上のように、本発明に係るプロジェクターおよび検出方法によれば、プロジェクターにおいて、可視光を撮像する第１の撮像部および第２の撮像部による撮像結果に基づいて非発光型指示体の位置を検出し、赤外光を撮像する第３の撮像部による撮像結果に基づいて自発光型指示体の位置を検出する。これにより、本発明に係るプロジェクターおよび検出方法では、プロジェクターにおいて、自発光型指示体および非発光型指示体の両方について検出を行うことができる。
【図面の簡単な説明】
【００１４】
【図１】本発明の一実施形態（第１実施形態）に係るインタラクティブシステムの概略的な構成例を示す図である。
【図２】本発明の一実施形態（第２実施形態）に係るインタラクティブシステムの概略的な構成例を示す図である。
【図３】本発明の一実施形態（第３実施形態）に係るインタラクティブシステムの概略的な構成例を示す図である。
【図４】本発明の一実施形態（第４実施形態）に係るインタラクティブシステムの概略的な構成例を示す図である。
【発明を実施するための形態】
【００１５】
本発明の実施形態について図面を参照して詳細に説明する。
（第１実施形態）
図１は、本発明の一実施形態（第１実施形態）に係るインタラクティブシステム１の概略的な構成例を示す図である。
インタラクティブシステム１は、プロジェクター１１と、投写面１２と、電子ペン１３を備える。また、図１には、人間の指１４を示してある。
投写面１２は、例えば、スクリーンであるが、他の構成例として、壁あるいは天井などでもよい。
本実施形態では、投写面１２は、プロジェクター１１により画像が投写される面となるとともに、電子ペン１３および指１４などにより文字または図形などを描くことなどが可能な操作面（電子黒板のような面）となる。
【００１６】
電子ペン１３は、ユーザーにより持たれるペン状の物体であり、本実施形態では、赤外光を発する指示体として用いられる。
電子ペン１３は、発光部２１を有する。発光部２１は、赤外光を発する。
また、電子ペン１３は、赤外光を受光する受光部（図示せず）、当該電子ペン１３の先が他の物体（本実施形態では、投写面１２）に押し付けられる操作（押圧操作）を検出する押圧スイッチ、および電子ペン１３における各種の制御を行う制御部を備える。
電子ペン１３は、プロジェクター１１から赤外光で送信される同期信号を受光部により受信し、当該同期信号に同期して発光部２１から所定の発光パターン（発光シーケンス）で赤外光を送信する。当該発光パターンには電子ペン１３の識別情報が含まれてもよい。電子ペン１３は、押圧スイッチにより押圧操作が検出された場合に、発光部２１により発せられる赤外光の発光パターンを変化させる。これにより、電子ペン１３は、プロジェクター１１と同期して赤外光を送信し、そして、ユーザーにより持たれて当該電子ペン１３により投写面１２に対して押圧操作が行われると、当該押圧操作を示す発光パターンの赤外光を送信する。当該押圧操作により、ユーザーは、例えば、投写面１２に文字または図形などを描くこと、あるいは、投写面１２に表示されたメニューの中から任意の項目を指示する（クリックする）こと、などが可能である。
【００１７】
一例として、電子ペン１３は、プロジェクター１１から受信される同期信号に同期して、周期的なタイミング（一定の時間間隔のタイミング）で赤外光を送信し、また、押圧操作されていないときと押圧操作されているときとで異なる発光パターンの赤外光を送信する。
他の構成例として、電子ペン１３は、押圧操作されていないときは赤外光を発せず（送信せず）に、押圧操作されたときだけ赤外光を発しても（送信しても）よい。この構成においても、電子ペン１３が赤外光を送信することで、プロジェクター１１は当該赤外光により電子ペン１３が存在することを検出することが可能である。
また、電子ペン１３は、例えば、所定のボタンなどの操作部を備えてもよい。そして、電子ペン１３は、各ボタンが操作されているときには、他のときとは異なる発光パターンの赤外光を送信してもよい。この場合、プロジェクター１１は当該赤外光により電子ペン１３の各ボタンなどの操作部が操作されたことを検出することができる。
【００１８】
指１４は、ユーザーの指であり、本実施形態では、発光しない指示体として用いられる。
指１４は、例えば、投写面１２に文字または図形などを描くこと、あるいは、投写面１２に表示されたメニューの中から任意の項目を指示する（クリックする）こと、などが可能である。
【００１９】
プロジェクター１１について説明する。
プロジェクター１１は、投写部３１と、第１の可視光カメラ３２と、第２の可視光カメラ３３と、赤外カメラ３４と、赤外通信部３５と、記憶部３６と、制御部３７を備える。制御部３７は、第１検出部５１と、第２検出部５２を備える。
【００２０】
投写部３１は、表示対象の画像を投写面１２に投写する。これにより、投写された画像が投写面１２に表示される。表示対象の画像は、任意の画像であってもよく、例えば、複数の項目の中からユーザーにより項目を指示することが可能なメニューの画像を含んでもよい。
【００２１】
具体的には、投写部３１は、液晶パネルと、光源と、投写レンズを備える。投写部３１は、表示対象の画像の信号を、ＲＧＢのそれぞれ（Red、Green、Blue）ごとに、液晶パネルの各画素の階調を表す画像情報に変換し、この画像情報に応じた駆動電圧を液晶パネルの各画素に印加（駆動）する。この印加によって、液晶パネルは、光源から当該液晶パネルへ入射された光を、前記した画像情報に応じた画像を映し出す光（変調された光）として形成する。投写部３１は、光源から放射された光を液晶パネル側に反射するリフレクターを含み、反射された光を前記した画像情報に応じた画像を映し出す光として液晶パネルに形成させる。そして、投写部３１は、液晶パネルに形成された画像を映し出す光を、投写レンズを通して投写する。
【００２２】
ここで、光源は、例えば、超高圧水銀ランプあるいはメタルハライドランプなどからなる放電型の光源ランプであるが、光源ランプに限られず、ＬＥＤ（Light Emitting Diode）光源あるいはレーザー光源などが用いられてもよい。液晶パネルは、例えば、一対の透明基板の間に液晶が封入された、光の三原色であるＲＧＢそれぞれに対応した透過型の液晶パネルである。なお、液晶パネルとしては、透過型の液晶パネルに限られず、反射型の液晶パネルが用いられてもよい。また、投写部３１のライトバルブとしては、液晶パネルを備える構成に代えて、ＤＭＤ（Digital Mirror Device）などを備える構成が用いられてもよい。
【００２３】
第１の可視光カメラ３２、第２の可視光カメラ３３および赤外カメラ３４は、それぞれ、投写面１２を含む領域が撮像する領域（撮像領域）となるように、設置されている。
第１の可視光カメラ３２は、可視光を検出する素子を有し、可視光（可視光の画像）を撮像するカメラである。
第２の可視光カメラ３３は、可視光を検出する素子を有し、可視光（可視光の画像）を撮像するカメラである。
本実施形態では、第１の可視光カメラ３２および第２の可視光カメラ３３により、ステレオカメラが構成されている。ステレオカメラの機能では、複数の異なる方向から同時に対象物を撮像して、その撮像結果（画像）に基づいて、三次元の情報を得ることができる。ステレオカメラの機能では、例えば、三角測量が用いられる。
なお、第１の可視光カメラ３２および第２の可視光カメラ３３としては、例えば、同じカメラ（同じ性能を有するカメラ）が用いられてもよく、または、異なる性能を有するカメラが用いられてもよい。
また、本実施形態では、２個の可視光カメラ（第１の可視光カメラ３２および第２の可視光カメラ３３）が用いられるが、３個以上の可視光カメラが用いられてもよい。
【００２４】
赤外カメラ３４は、赤外光を検出する素子を有し、赤外光（赤外光の画像）を撮像するカメラである。
なお、本実施形態では、１個の赤外カメラ（赤外カメラ３４）が用いられるが、２個以上の赤外カメラが用いられてもよい。
【００２５】
ここで、本実施形態では、第１の可視光カメラ３２および第２の可視光カメラ３３により撮像される画像は、投写面１２の画像、電子ペン１３の画像、および指１４の画像を含み得る。
また、本実施形態では、赤外カメラ３４により撮像される画像は、電子ペン１３の発光部２１から送信される赤外光の画像を含み得る。
【００２６】
また、第１の可視光カメラ３２および第２の可視光カメラ３３により撮像される画像の座標と、投写部３１により投写されて投写面１２に表示される画像の座標とが、対応付けられている。この対応付けは、例えば、あらかじめキャリブレーションが行われて、記憶部３６に設定される。
同様に、赤外カメラ３４により撮像される画像の座標と、投写部３１により投写されて投写面１２に表示される画像の座標とが、対応付けられている。この対応付けは、例えば、あらかじめキャリブレーションが行われて、記憶部３６に設定される。
【００２７】
赤外通信部３５は、所定の同期信号を赤外光で送信する。本実施形態では、電子ペン１３が、当該同期信号を受信して、当該同期信号に同期する。これにより、プロジェクター１１と電子ペン１３とが同期して、赤外光を通信する。
記憶部３６は、各種の情報を記憶する。本実施形態では、記憶部３６は、制御部３７を動作させるためのプログラム、各種のパラメーターなどの情報を記憶する。
制御部３７は、各種の制御を行う。本実施形態では、制御部３７は、ＣＰＵ（Central Processing Unit）を有しており、記憶部３６に記憶されたプログラムを実行することで各種の制御を行う。
【００２８】
ここで、プロジェクター１１は、例えば、入力部を備えてもよい。入力部は、タッチパネルあるいはキーなどの操作部を有し、当該操作部に対してユーザーにより行われる操作に応じた情報を入力する機能、または他の装置から出力された情報を入力する機能のうちの１以上を備える。
また、プロジェクター１１は、例えば、出力部を備えてもよい。出力部は、液晶ディスプレイなどの画面に情報を表示出力する機能、音声の情報を音出力する機能、または、他の装置に情報を出力する機能のうちの１以上を備える。
また、プロジェクター１１は、例えば、パーソナルコンピュータ（ＰＣ：Personal Computer）などの端末装置と接続されてもよい。端末装置からプロジェクター１１に表示対象の画像が入力されてもよい。プロジェクター１１から端末装置に各種の情報が出力されてもよい。
なお、プロジェクター１１は、リアプロジェクション（背面投射）型のプロジェクターであってもよい。
【００２９】
本実施形態では、プロジェクター１１の制御部３７は、指示体（本実施形態では、電子ペン１３および指１４）による指示に従った処理を実行する機能（インタラクティブな機能）を有する。
なお、本実施形態では、このようなインタラクティブな機能をプロジェクター１１の制御部３７に備えたが、他の構成例として、プロジェクター１１に端末装置が接続されて互いに通信する場合には、このようなインタラクティブな機能の一部または全部が端末装置に備えられてもよい。
【００３０】
続いて、第１検出部５１および第２検出部５２について説明する。
第１検出部５１は、第１の可視光カメラ３２により撮像された画像および第２の可視光カメラ３３により撮像された画像に基づいて、これらの画像に含まれる物体の３次元情報を検出する。
第１検出部５１は、非発光型指示体に関する検出および自発光型指示体に関する検出を行う。
【００３１】
本実施形態では、第１検出部５１は、指１４の位置を検出する。また、第１検出部５１は、指１４の位置の時間的な変化を、指１４の動作として検出する。
第１検出部５１は、例えば、投写面１２に対する指１４の３次元的な位置を検出する。第１検出部５１は、投写面１２に対する指１４の３次元的な位置に基づいて、投写面１２に指１４が接触しているか否かを検出することができる。また、第１検出部５１は、投写面１２に指１４が接触している状態における当該指１４の位置の変化（動作）を検出することができ、また、投写面１２に指１４が接触していない状態における当該指１４の位置の変化（動作）を検出することができる。
【００３２】
これにより、第１検出部５１は、例えば、指１４が投写面１２に接触した状態で当該指１４の位置が変化する動作を検出することで、指１４と投写面１２とが接触させられて当該指１４により投写面１２に描かれる文字または図形などを検出することができる。なお、文字または図形などの描画は、消しゴムの機能により文字または図形などを消去することを含んでもよい。また、第１検出部５１は、例えば、投写面１２に表示された任意の項目の箇所に指１４が接触していない状態から接触した状態になる動作を検出することで、投写面１２に表示された任意の項目が指１４により指示されたことを検出することができる。また、第１検出部５１は、例えば、指１４が投写面１２に接触せずに当該投写面１２から離隔した状態で当該指１４の位置が変化するホバリングの動作を検出することができる。
【００３３】
具体例として、第１検出部５１は、投写面１２に表示された複数の項目を含むメニューの中から指１４により特定の項目が指示されたことを検出することができる。
また、第１検出部５１は、投写面１２に表示された特定の図形（項目の一例）が指１４により指示されたことを検出することができる。特定の図形としては、例えば、マトリックス型２次元コードであるＱＲコード（登録商標）が用いられてもよい。
また、第１検出部５１は、投写面１２に表示された特定の部分が指１４により指示された場合に、当該特定の部分の色を検出し、当該色の指定を受け付けることができる。この場合、第１検出部５１は、例えば、第１の可視光カメラ３２により撮像された画像および第２の可視光カメラ３３により撮像された画像のうちの一方または両方に基づいて、特定の部分の色を検出してもよい。また、例えば、第１検出部５１は、指１４の所定の動作（例えば、項目の指示）に応じて色の指定を受け付けるモードと他のモードとの切り替えを行い、色の指定を受け付けるモードであるとき（のみ）に色の指定を受け付けてもよい。
【００３４】
ここで、指１４により指示する対象は、例えば、投写面１２に表示された画像の一部以外であってもよい。当該対象は、第１の可視光カメラ３２および第２の可視光カメラ３３により撮像される任意の物体（ここでは、投写面１２以外の物体）の一部であってもよい。具体例として、色の指定が行われる場合に、当該対象は、人間の服の一部、または、人間の腕などに取り付けられたパレット（複数色の色見本）における該当する色の部分などであってもよい。
【００３５】
本実施形態では、第１検出部５１は、電子ペン１３の位置を検出することもできる。また、第１検出部５１は、電子ペン１３の位置の時間的な変化を、電子ペン１３の動作として検出することもできる。
第１検出部５１は、例えば、投写面１２に対する電子ペン１３の３次元的な位置を検出する。
これにより、本実施形態では、電子ペン１３についても、指１４の場合と同様な位置および動作（例えば、ホバリングなどの動作）を検出することが可能である。
【００３６】
但し、本実施形態では、指１４が投写面１２に接触しているか否か（押圧操作されているか否か）については、第１の可視光カメラ３２および第２の可視光カメラ３３により撮像される画像に基づいて第１検出部５１により検出（判定）するのに対して、電子ペン１３の先が投写面１２に接触しているか否か（押圧操作されているか否か）については、赤外カメラ３４により撮像される画像に基づいて第２検出部５２により検出（判定）する。
【００３７】
ここで、本実施形態では、電子ペン１３の押圧操作の検出については、第１の可視光カメラ３２および第２の可視光カメラ３３により撮像される画像に基づいて検出する精度よりも、赤外カメラ３４により撮像される画像に基づいて検出する精度の方が良いことを想定している。本実施形態では、この理由の一つとして、電子ペン１３から赤外光を送信することで、赤外カメラ３４により撮像される画像に含まれる当該赤外光の画像の輝度を高くすることが可能であることを想定している。このため、本実施形態では、赤外カメラ３４により撮像される画像に基づいて電子ペン１３の押圧操作を検出する構成を採用して、その検出の精度を良くしている。本実施形態では、例えば、指１４の動作と比べて、電子ペン１３の動作によって、より細かな精度の良い描画あるいは指示などが可能である構成を想定している。
なお、他の構成例として、第１検出部５１は、電子ペン１３の押圧操作についても、指１４の押圧操作と同様に、第１の可視光カメラ３２および第２の可視光カメラ３３により撮像される画像に基づいて検出してもよい。
【００３８】
また、第１検出部５１は、パターンマッチングの方法を用いて、第１の可視光カメラ３２および第２の可視光カメラ３３により撮像される画像に含まれる指１４の画像を検出してもよく、また、当該指１４の画像を追従してもよい。
また、第１検出部５１は、パターンマッチングの方法を用いて、第１の可視光カメラ３２および第２の可視光カメラ３３により撮像される画像に含まれる電子ペン１３の画像を検出してもよく、また、当該電子ペン１３の画像を追従してもよい。
また、第１検出部５１は、パターンマッチングの方法を用いて、第１の可視光カメラ３２および第２の可視光カメラ３３により撮像される画像に含まれる電子ペン１３の画像と、画像に含まれる指１４の画像と、を識別（特定）してもよい。
【００３９】
また、第１検出部５１は、第１の可視光カメラ３２および第２の可視光カメラ３３により撮像される画像に含まれる物体の画像の色を検出し、当該色に基づいて、当該物体に関する情報を検出してもよい。例えば、第１検出部５１は、物体の画像の色に基づいて、当該物体が指１４であること、または、当該物体が電子ペン１３であること、を検出（判定）することが可能である。
【００４０】
第２検出部５２は、赤外カメラ３４により撮像された画像に基づいて、当該画像に含まれる赤外光の情報を検出する。
第２検出部５２は、自発光型指示体に関する検出を行う。
本実施形態では、電子ペン１３（自発光型指示体の一例）から送信される赤外光の位置を、当該電子ペン１３の位置とみなす。なお、他の構成例として、パターンマッチングなどにより電子ペン１３の全体の画像を検出する場合には、電子ペン１３から送信される赤外光以外の位置を当該電子ペン１３の位置とみなしてもよい。また、この場合、電子ペン１３の位置とともに、当該電子ペン１３の姿勢を検出などしてもよい。
【００４１】
本実施形態では、第２検出部５２は、電子ペン１３の位置を検出する。また、第２検出部５２は、電子ペン１３の位置の時間的な変化を、電子ペン１３の動作として検出する。また、本実施形態では、第２検出部５２は、電子ペン１３から周期的なタイミングで送信される赤外光を受信して、当該赤外光に基づいて電子ペン１３の位置あるいは動作を検出し、また、当該赤外光の発光パターンに基づいて、電子ペン１３が押圧操作されているか否かを検出する。
【００４２】
第２検出部５２は、投写面１２に電子ペン１３の先が接触しているか否か（押圧操作されているか否か）を検出（判定）することができる。本実施形態では、第２検出部５２は、赤外カメラ３４により順次撮像された複数の画像に、電子ペン１３の発光部２１から送信された所定の発光パターン（押圧操作に対応した発光パターン）の赤外光の画像が含まれる場合には、電子ペン１３が投写面１２に押圧操作されているとみなして検出する。また、第２検出部５２は、投写面１２に電子ペン１３の先が接触している状態における当該電子ペン１３の位置の変化（動作）を検出することができる。
【００４３】
これにより、第２検出部５２は、例えば、電子ペン１３の先が投写面１２に接触した状態で当該電子ペン１３の位置が変化する動作を検出することで、電子ペン１３と投写面１２とが接触させられて当該電子ペン１３により投写面１２に描かれる文字または図形などを検出することができる。なお、文字または図形などの描画は、消しゴムの機能により文字または図形などを消去することを含んでもよい。また、第２検出部５２は、例えば、投写面１２に表示された任意の項目の箇所に電子ペン１３の先が接触していない状態から接触した状態になる動作を検出することで、投写面１２に表示された任意の項目が電子ペン１３により指示されたことを検出することができる。
【００４４】
具体例として、第２検出部５２は、投写面１２に表示された複数の項目を含むメニューの中から電子ペン１３により特定の項目が指示されたことを検出することができる。
また、第２検出部５２は、投写面１２に表示された特定の図形（項目の一例）が電子ペン１３により指示されたことを検出することができる。特定の図形としては、例えば、マトリックス型２次元コードであるＱＲコード（登録商標）が用いられてもよい。
【００４５】
ここで、電子ペン１３により指示する対象は、例えば、投写面１２に表示された画像の一部以外であってもよい。当該対象は、第１の可視光カメラ３２および第２の可視光カメラ３３により撮像される任意の物体（ここでは、投写面１２以外の物体）の一部であってもよい。具体例として、色の指定が行われる場合に、当該対象は、人間の服の一部、または、人間の腕などに取り付けられたパレットにおける該当する色の部分などであってもよい。本実施形態では、電子ペン１３は、当該電子ペン１３の先が投写面１２以外の物体に接触した場合にも、発光部２１から押圧操作に対応した赤外光を送信する。これにより、第２検出部５２は、電子ペン１３の先が任意の物体に接触して押圧操作されたことを検出することができる。
【００４６】
また、第２検出部５２は、例えば、電子ペン１３に所定のボタンなどの操作部が備えられ、当該操作部の操作に応じて所定の発光パターンの赤外光が当該電子ペン１３から送信される場合に、当該赤外光が受信されたことを検出したことに応じて、所定の操作が行われたことを検出してもよい。当該所定の操作の内容としては、例えば、色の指定を受け付けるモードと他のモードとの切り替えが用いられてもよい。
【００４７】
本実施形態では、第１検出部５１および第２検出部５２は、それぞれの検出結果を組み合わせた情報に基づいて、電子ペン１３または指１４に関する情報を検出してもよい。例えば、第１検出部５１により検出される物体ごとに、第２検出部５２により当該物体から赤外光が送信されるか否かを検出（判定）し、この結果に基づいて、それぞれの物体が、発光する物体（自発光型の物体）であるか、または、発光しない物体（非発光型の物体）であるかを検出（判定）することができる。
本実施形態では、第１検出部５１により電子ペン１３を検出した後には、当該電子ペン１３からの赤外光が第２検出部５２により検出されなくても、第１検出部５１により当該電子ペン１３の位置および動作（例えば、ホバリングなどの動作）を検出することが可能である。この場合、電子ペン１３から赤外光を送信する周期的なタイミング（一定の時間間隔のタイミング）は、長い周期のタイミングであってもよい。また、この場合、他の構成例として、電子ペン１３が押圧操作されていない場合には当該電子ペン１３が赤外光を送信しない構成が用いられてもよい。
【００４８】
制御部３７は、第１検出部５１および第２検出部５２の一方または両方の検出結果に基づいて、当該検出結果に対応する処理を実行する。
制御部３７は、例えば、電子ペン１３または指１４により投写面１２に描かれた文字または図形などを表示対象の画像に重畳させ、これにより、表示対象の画像の上に当該文字または当該図形などが描かれた画像を投写部３１により投写面１２に投写させることができる。また、制御部３７は、例えば、表示対象の画像に重畳させられるなどして投写面１２に表示されたメニュー（メニューの画像）の中から、電子ペン１３または指１４により任意の項目（項目の画像）が指示された場合に、当該項目に対応する処理を実行することができる。また、制御部３７は、例えば、電子ペン１３または指１４により特定の図形が指示された場合に、当該図形に対応する処理を実行することができる。また、制御部３７は、例えば、電子ペン１３または指１４により特定の色が指示（指定）された場合に、当該色に対応する処理を実行することができる。当該色に対応する処理としては、例えば、文字または図形の描画などで当該色を使用する処理が用いられてもよい。なお、制御部３７は、指示体の型（非発光型、または、自発光型）に応じて、色の指定を受け付けてもよい。また、制御部３７は、指示体の色に応じて、当該色の指定を受け付けてもよい。
【００４９】
以上のように、本実施形態に係るプロジェクター１１では、赤外光を発する指示体（本実施形態では、電子ペン１３）および自ら光を発しない指示体（本実施形態では、指１４）の両方について検出を行うことができる。
例えば、赤外カメラ３４を使用せずに、可視光カメラ（本実施形態では、第１の可視光カメラ３２および第２の可視光カメラ３３）のみを使用する構成では、赤外光を検出することができず、高精度に描画が可能な電子ペン１３を使用することができなくなる。これに対して、本実施形態に係るプロジェクター１１では、赤外カメラ３４を使用することで、指示体として電子ペン１３を使用することを可能としている。
【００５０】
また、例えば、指示体として指１４を使用することを可能とするために、赤外光を照射するライトカーテン装置を設置する場合には、その機材（ライトカーテン装置）が必要になり、その機材の設置スペースが必要になり、その機材による消費電力がかかる。これに対して、本実施形態に係るプロジェクター１１では、可視光カメラ（本実施形態では、第１の可視光カメラ３２および第２の可視光カメラ３３）を使用することで、ライトカーテン装置を設置しなくても、指示体として指１４を使用することが可能である。このため、本実施形態では、ライトカーテン装置を設置する場合に生じる設置スペースなどの制限をなくすことが可能であり、ライトカーテン装置に要する電力を省電力化することが可能である。但し、本実施形態に係るインタラクティブシステム１において、ライトカーテン装置が設置されて使用されてもよい。
【００５１】
また、本実施形態に係るプロジェクター１１では、可視光カメラ（本実施形態では、第１の可視光カメラ３２および第２の可視光カメラ３３）により撮像される画像に基づいて、電子ペン１３の態様（例えば、形状、色あるいは模様など）を検出して、当該電子ペン１３の位置の変化を検出することで、当該電子ペン１３のホバリングなどの動作を検出することが可能である。この場合、電子ペン１３のホバリングなどの動作中に、当該電子ペン１３から赤外線を送信しなくても、プロジェクター１１は当該動作を検出することが可能である。このため、このような動作における電子ペン１３からの赤外線の送信の頻度を少なくすること、または、当該送信をなくすことで、電子ペン１３の消費電力を低減し、電子ペン１３の電池の寿命を大幅に延ばすことが可能である。
【００５２】
このように、本実施形態に係るプロジェクター１１では、可視光のステレオカメラ（本実施形態では、第１の可視光カメラ３２および第２の可視光カメラ３３）と赤外カメラ３４による複合的な検出を行うことで、指１４による操作と電子ペン１３による操作を両立させることができ、省電力化を図ることができる。
【００５３】
一構成例として、プロジェクター１１では、投写面に画像を投写する投写部３１と、投写面１２を含む領域を撮像領域とし、可視光を撮像する第１の撮像部（本実施形態では、第１の可視光カメラ３２）および第２の撮像部（本実施形態では、第２の可視光カメラ３３）と、投写面１２を含む領域を撮像領域とし、赤外光を撮像する第３の撮像部（本実施形態では、赤外カメラ３４）と、第１の撮像部および第２の撮像部による撮像結果に基づいて、非発光型指示体（本実施形態では、指１４）の位置を検出する第１検出部５１と、第３の撮像部による撮像結果に基づいて、赤外光を発する発光部２１を有する自発光型指示体（本実施形態では、電子ペン１３）の位置を検出する第２検出部５２と、を備える。
一構成例として、検出方法（本実施形態では、プロジェクター１１において行われる検出方法）では、プロジェクター１１において、投写面１２に画像を投写し、第１の撮像部および第２の撮像部が、投写面１２を含む領域を撮像領域とし、可視光を撮像し、第３の撮像部が、投写面１２を含む領域を撮像領域とし、赤外光を撮像し、第１の撮像部および第２の撮像部による撮像結果に基づいて、非発光型指示体の位置を検出し、第３の撮像部による撮像結果に基づいて、赤外光を発する発光部を有する自発光型指示体の位置を検出する。
【００５４】
一構成例として、プロジェクター１１では、第１の撮像部による撮像結果および第２の撮像部による撮像結果のうちの少なくとも一方に基づいて、非発光型指示体または自発光型指示体で指示された部分の色を検出する色検出部をさらに備えてもよい。当該色検出部は、例えば、制御部３７に備えられてもよい。
一構成例として、プロジェクター１１では、第１の撮像部による撮像結果および第２の撮像部による撮像結果のうちの少なくとも一方に基づいて、非発光型指示体または自発光型指示体で指示された部分の図形を検出する図形検出部をさらに備えてもよい。当該図形検出部は、例えば、制御部３７に備えられてもよい。
一構成例として、プロジェクター１１では、第１の撮像部による撮像結果および第２の撮像部による撮像結果のうちの少なくとも一方に基づいて、自発光型指示体の態様を検出する態様検出部をさらに備えてもよい。当該態様検出部は、例えば、制御部３７に備えられてもよい。
【００５５】
（第２実施形態）
図２は、本発明の一実施形態（第２実施形態）に係るインタラクティブシステム１０１の概略的な構成例を示す図である。
インタラクティブシステム１０１は、プロジェクター１１１と、投写面１２と、電子ペン１３を備える。電子ペン１３は発光部２１を有する。また、図２には、人間の指１４を示してある。
ここで、投写面１２と、発光部２１を有する電子ペン１３と、人間の指１４は、それぞれ、図１に示されるものと同じであり、同じ符号を付してある。
【００５６】
プロジェクター１１１について説明する。
プロジェクター１１１は、投写部１３１と、可視光カメラ１３２と、可視光／赤外カメラ１３３と、赤外通信部１３４と、記憶部１３５と、制御部１３６を備える。制御部１３６は、第１検出部１５１と、第２検出部１５２を備える。
ここで、本実施形態では、投写部１３１、赤外通信部１３４、記憶部１３５、および制御部１３６の概略（各種の制御を行う点）は、それぞれ、図１に示される投写部３１、赤外通信部３５、記憶部３６、および制御部３７の概略（各種の制御を行う点）と同様である。
【００５７】
可視光カメラ１３２および可視光／赤外カメラ１３３は、それぞれ、投写面１２を含む領域が撮像する領域（撮像領域）となるように、設置されている。
可視光カメラ１３２は、図１に示される第１の可視光カメラ３２と同様な機能を有する。
可視光／赤外カメラ１３３は、可視光カメラの機能と赤外カメラの機能とを切り替えることが可能なカメラである。本実施形態では、可視光／赤外カメラ１３３は、可視光カメラと、所定のフィルタ（例えば、可視光を遮断して赤外光を通過させるフィルタ）を備え、当該フィルタが当該可視光カメラから外されている状態では可視光カメラの機能を有し、当該フィルタが当該可視光カメラに当てられている状態では赤外カメラの機能を有する。本実施形態では、制御部１３６が、可視光／赤外カメラ１３３の当該フィルタの状態を切り替える制御を行う。
【００５８】
ここで、可視光／赤外カメラ１３３が可視光カメラの機能を有する状態では、当該可視光／赤外カメラ１３３は、図１に示される第２の可視光カメラ３３と同様な役割をする。この状態で、第１検出部１５１は、可視光カメラ１３２により撮像された画像および可視光／赤外カメラ１３３（可視光カメラの機能）により撮像された画像に基づいて、図１に示される第１検出部５１と同様な検出を行う。
【００５９】
また、可視光／赤外カメラ１３３が赤外カメラの機能を有する状態では、当該可視光／赤外カメラ１３３は、図１に示される赤外カメラ３４と同様な役割をする。この状態で、第２検出部１５２は、可視光／赤外カメラ１３３（赤外カメラの機能）により撮像された画像に基づいて、図１に示される第２検出部５２と同様な検出を行う。
【００６０】
以上のように、本実施形態に係るプロジェクター１１１では、図１に示されるプロジェクター１１と同様な効果を得ることができる。
また、本実施形態に係るプロジェクター１１１では、可視光／赤外カメラ１３３を使用するため、例えば、可視光カメラと赤外カメラを別々に備える場合と比べて、カメラの数を少なくして、プロジェクターの小型化を図ることが可能である。
【００６１】
一構成例として、プロジェクター１１１では、第１の撮像部（可視光を撮像する撮像部）および第２の撮像部（可視光を撮像する撮像部）のうちの少なくとも一方（本実施形態では、一方のみ）は、可視光を撮像する機能および赤外光を撮像する機能を切り替えることが可能な撮像部（本実施形態では、可視光／赤外カメラ１３３）であり、第３の撮像部（赤外光を撮像する撮像部）も構成する。
【００６２】
（第３実施形態）
図３は、本発明の一実施形態（第３実施形態）に係るインタラクティブシステム２０１の概略的な構成例を示す図である。
インタラクティブシステム２０１は、プロジェクター２１１と、投写面１２と、電子ペン１３を備える。電子ペン１３は発光部２１を有する。また、図３には、人間の指１４を示してある。
ここで、投写面１２と、発光部２１を有する電子ペン１３と、人間の指１４は、それぞれ、図１に示されるものと同じであり、同じ符号を付してある。
【００６３】
プロジェクター２１１について説明する。
プロジェクター２１１は、投写部２３１と、第１の可視光／赤外カメラ２３２と、第２の可視光／赤外カメラ２３３と、赤外通信部２３４と、記憶部２３５と、制御部２３６を備える。制御部２３６は、第１検出部２５１と、第２検出部２５２を備える。
ここで、本実施形態では、投写部２３１、赤外通信部２３４、記憶部２３５、および制御部２３６の概略（各種の制御を行う点）は、それぞれ、図１に示される投写部３１、赤外通信部３５、記憶部３６、および制御部３７の概略（各種の制御を行う点）と同様である。
【００６４】
第１の可視光／赤外カメラ２３２および第２の可視光／赤外カメラ２３３は、それぞれ、投写面１２を含む領域が撮像する領域（撮像領域）となるように、設置されている。
第１の可視光／赤外カメラ２３２は、可視光カメラの機能と赤外カメラの機能とを切り替えることが可能なカメラである。本実施形態では、制御部２３６が、第１の可視光／赤外カメラ２３２の状態（可視光カメラの機能を有する状態と、赤外カメラの機能を有する状態）を切り替える制御を行う。
同様に、第２の可視光／赤外カメラ２３３は、可視光カメラの機能と赤外カメラの機能とを切り替えることが可能なカメラである。本実施形態では、制御部２３６が、第２の可視光／赤外カメラ２３３の状態（可視光カメラの機能を有する状態と、赤外カメラの機能を有する状態）を切り替える制御を行う。
なお、それぞれの可視光／赤外カメラ２３２、２３３の状態を切り替える構成としては、例えば、図２に示される可視光／赤外カメラ１３３の状態を切り替える構成と同様である。
【００６５】
ここで、２個の可視光／赤外カメラ２３２、２３２の両方が可視光カメラの機能を有する状態では、これらの可視光／赤外カメラ２３２、２３３は、図１に示される２個の可視光カメラ（第１の可視光カメラ３２および第２の可視光カメラ３３）と同様な役割をする。この状態で、第１検出部２５１は、可視光／赤外カメラ２３２（可視光カメラの機能）により撮像された画像および可視光／赤外カメラ２３３（可視光カメラの機能）により撮像された画像に基づいて、図１に示される第１検出部５１と同様な検出を行う。
【００６６】
また、２個の可視光／赤外カメラ２３２、２３２のうちの一方が赤外カメラの機能を有する状態では、その可視光／赤外カメラ（可視光／赤外カメラ２３２、２３２のうちの一方）は、図１に示される赤外カメラ３４と同様な役割をする。この状態で、第２検出部２５２は、その可視光／赤外カメラ（赤外カメラの機能）により撮像された画像に基づいて、図１に示される第２検出部５２と同様な検出を行う。
【００６７】
また、２個の可視光／赤外カメラ２３２、２３２の両方が赤外カメラの機能を有する状態では、これら２個の可視光／赤外カメラ２３２、２３２（赤外カメラの機能）によりステレオカメラが構成され、赤外光に関する３次元情報が得られる。この状態で、第２検出部２５２は、例えば、可視光／赤外カメラ２３２（赤外カメラの機能）により撮像された画像および可視光／赤外カメラ２３３（赤外カメラの機能）により撮像された画像に基づいて、電子ペン１３から送信される赤外光に関する３次元情報を検出してもよい。そして、第２検出部２５２は、この検出情報を、電子ペン１３に関する情報を検出する際に利用してもよい。
【００６８】
以上のように、本実施形態に係るプロジェクター２１１では、図１に示されるプロジェクター１１と同様な効果を得ることができる。
また、本実施形態に係るプロジェクター２１１では、可視光／赤外カメラ１３２、１３３を使用するため、例えば、可視光カメラと赤外カメラを別々に備える場合と比べて、カメラの数を少なくして、プロジェクターの小型化を図ることが可能である。
また、本実施形態に係るプロジェクター２１１では、赤外光について３次元情報を検出することが可能であり、電子ペン１３に関する検出の精度を高めることが可能である。
【００６９】
一構成例として、プロジェクター２１１では、第１の撮像部（可視光を撮像する撮像部）および第２の撮像部（可視光を撮像する撮像部）の両方は、可視光を撮像する機能および赤外光を撮像する機能を切り替えることが可能な撮像部（本実施形態では、可視光／赤外カメラ２３２、２３３）であり、第３の撮像部（赤外光を撮像する撮像部）も構成する。
【００７０】
（第４実施形態）
図４は、本発明の一実施形態（第４実施形態）に係るインタラクティブシステム３０１の概略的な構成例を示す図である。
インタラクティブシステム３０１は、プロジェクター３１１と、投写面１２と、電子ペン１３を備える。電子ペン１３は発光部２１を有する。また、図４には、人間の指１４を示してある。
ここで、投写面１２と、発光部２１を有する電子ペン１３と、人間の指１４は、それぞれ、図１に示されるものと同じであり、同じ符号を付してある。
【００７１】
プロジェクター３１１について説明する。
プロジェクター３１１は、投写部３３１と、第１の可視光カメラ３３２と、第２の可視光カメラ３３３と、赤外カメラ３３４と、サーモグラフィーカメラ３３５と、赤外通信部３３６と、記憶部３３７と、制御部３３８を備える。制御部３３８は、第１検出部３５１と、第２検出部３５２を備える。
ここで、本実施形態では、投写部３３１と、第１の可視光カメラ３３２と、第２の可視光カメラ３３３と、赤外カメラ３３４と、赤外通信部３３６と、記憶部３３７と、制御部３３８の概略（各種の制御を行う点）は、それぞれ、図１に示される投写部３１と、第１の可視光カメラ３２と、第２の可視光カメラ３３と、赤外カメラ３４と、赤外通信部３５と、記憶部３６と、制御部３７の概略（各種の制御を行う点）と同様である。
【００７２】
第１の可視光カメラ３３２、第２の可視光カメラ３３３、赤外カメラ３３４およびサーモグラフィーカメラ３３５は、それぞれ、投写面１２を含む領域が撮像する領域（撮像領域）となるように、設置されている。
サーモグラフィーカメラ３３５は、人間などの体温によって当該人間など（本実施形態では、指１４）から放射される赤外光（赤外線）を検出し、当該赤外光の画像（熱分布の画像）を撮像するカメラである。サーモグラフィーカメラ３３５は、赤外カメラの一種であるといえるが、本実施形態では、赤外カメラ３３４とは別体で備えられている。
【００７３】
第１検出部３５１は、図１に示される第１検出部５１と同様に、第１の可視光カメラ３３２により撮像された画像および第２の可視光カメラ３３３により撮像された画像に基づいて、これらの画像に含まれる物体の３次元情報を検出する機能を有する。さらに、本実施形態では、第１検出部３５１は、人間など（本実施形態では、指１４）に関する検出を行う場合に、サーモグラフィーカメラ３３５により撮像された画像を用いることが可能である。第１検出部３５１は、例えば、第１の可視光カメラ３３２により撮像された画像および第２の可視光カメラ３３３により撮像された画像とともに、サーモグラフィーカメラ３３５により撮像された画像を用いることで、人間などに関する検出の精度を高めることが可能である。
【００７４】
具体例として、第１検出部３５１は、サーモグラフィーカメラ３３５により撮像された画像に基づいて人間などの画像を検出することで、可視光カメラ（本実施形態では、第１の可視光カメラ３３２および第２の可視光カメラ３３３）により撮像された画像に基づいて検出された物体が人間などであるかまたは体温の無い物体（本実施形態では、電子ペン１３）であるかを検出（判定）することができる。この場合、例えば、電子ペン１３からの赤外線の送信の頻度を少なくすること、または、当該送信をなくすことで、電子ペン１３の消費電力を低減し、電子ペン１３の電池の寿命を大幅に延ばすことが可能である。
また、第１検出部３５１は、パターンマッチングの方法を用いて、第１の可視光カメラ３３２および第２の可視光カメラ３３３により撮像される画像に含まれる指１４の画像を検出する際に、サーモグラフィーカメラ３３５により撮像された画像を用いることで、パターンマッチングの精度を高めることが可能である。
【００７５】
以上のように、本実施形態に係るプロジェクター３１１では、図１に示されるプロジェクター１１と同様な効果を得ることができる。
また、本実施形態に係るプロジェクター３１１では、サーモグラフィーカメラ３３５により撮像された画像を用いることで、人間などに関する検出の精度を高めることが可能である。
【００７６】
ここで、本実施形態では、図１に示されるインタラクティブシステム１と同様な構成にサーモグラフィーカメラ３３５の機能を備えた場合を示したが、他の構成例として、図２に示されるインタラクティブシステム１０１と同様な構成にサーモグラフィーカメラの機能が備えられてもよく、または、図３に示されるインタラクティブシステム２０１と同様な構成にサーモグラフィーカメラの機能が備えられてもよい。
【００７７】
一構成例として、プロジェクター３１１では、撮像領域内の熱分布の画像を撮像するサーモグラフィーカメラ３３５を備え、第１検出部３５１は、第１の撮像部（本実施形態では、第１の可視光カメラ３３２）、第２の撮像部（本実施形態では、第２の可視光カメラ３３３）およびサーモグラフィーカメラ３３５による撮像結果に基づいて、非発光型指示体（本実施形態では、指１４）の位置を検出する。
【００７８】
以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。
【００７９】
なお、以上に説明した装置（例えば、プロジェクター１１、１１１、２１１、３１１など）における任意の構成部の機能を実現するためのプログラムを、コンピューター読み取り可能な記録媒体（記憶媒体）に記録（記憶）し、そのプログラムをコンピューターシステムに読み込ませて実行するようにしてもよい。なお、ここでいう「コンピューターシステム」とは、オペレーティングシステム（ＯＳ：Operating System）あるいは周辺機器等のハードウェアを含むものとする。また、「コンピューター読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ（Read Only Memory）、ＣＤ（Compact Disk）−ＲＯＭ等の可搬媒体、コンピューターシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピューター読み取り可能な記録媒体」とは、インターネット等のネットワークあるいは電話回線等の通信回線を介してプログラムが送信された場合のサーバーあるいはクライアントとなるコンピューターシステム内部の揮発性メモリー（ＲＡＭ：Random Access Memory）のように、一定時間プログラムを保持しているものも含むものとする。
また、上記のプログラムは、このプログラムを記憶装置等に格納したコンピューターシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピューターシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）あるいは電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。
また、上記のプログラムは、前述した機能の一部を実現するためのものであってもよい。さらに、上記のプログラムは、前述した機能をコンピューターシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。
【符号の説明】
【００８０】
１、１０１、２０１、３０１…インタラクティブシステム、１１、１１１、２１１、３１１…プロジェクター、１２…投写面、１３…電子ペン、１４…指、２１…発光部、３１、１３１、２３１、３３１…投写部、３２、３３、１３２、３３２、３３３…可視光カメラ、３４、３３４…赤外カメラ、３５、１３４、２３４、３３６…赤外通信部、３６、１３５、２３５、３３７…記憶部、３７、１３６、２３６、３３８…制御部、５１、１５１、２５１、３５１…第１検出部、５２、１５２、２５２、３５２…第２検出部、１３３、２３２、２３３…可視光／赤外カメラ、３３５…サーモグラフィーカメラ
【図１】
2016184850.tif 000003
【図２】
2016184850.tif 000004
【図３】
2016184850.tif 000005
【図４】
2016184850.tif 000006