(57)【特許請求の範囲】
【請求項１】
画像光投写手段から投写された画像光が結像される透過型スクリーンに座標入力機能を与える座標入力システムにおいて、
前記透過型スクリーンの背面に赤外光を投写する赤外光投写手段と、
前記透過型スクリーンの前面で反射手段を備える指示手段によって反射された赤外光を前記透過型スクリーンの背面から撮影する撮像手段と、
前記赤外光投写手段点灯時に前記撮像手段が出力する第一の撮像情報と、前記赤外光投写手段消灯時に前記撮像手段が出力する第二の撮像情報とを、前記画像光投写手段の投写画像のタイミングに同期して取得し、前記第一の撮像情報と前記第二の撮像情報との差分をとり、該差分を基に前記指示手段が指定する前記透過型スクリーン上の座標を求める撮像情報処理手段と、を有することを特徴とする座標入力システム。
【請求項２】
前記赤外光投写手段から前記透過型スクリーンの背面に投写される赤外光の投写光軸が、前記透過型スクリーンの面と直交しないことを特徴とする請求項１記載の座標入力システム。
【請求項３】
前記撮像手段の光軸が、前記透過型スクリーンの面と直交しないことを特徴とする請求項１記載の座標入力システム。
【請求項４】
前記赤外光投写手段が、前記透過型スクリーンの背面のそれぞれ異なる領域に赤外光を投写する複数の赤外光源からなることを特徴とする請求項１記載の座標入力システム。
【請求項５】
前記複数の赤外光源のそれぞれの投写光軸が前記透過型スクリーンの面と直交せず、かつ前記投写光軸の前記透過型スクリーンの面に対する入射角度が、それぞれ異なることを特徴とする請求項４記載の座標入力システム。
【請求項６】
前記指示手段の反射手段が、赤外光に対して選択性を持つ反射材であることを特徴とする請求項１記載の座標入力システム。
【請求項７】
前記指示手段の反射手段が、赤外光を選択的に透過する光学フィルタと、光反射材とからなることを特徴とする請求項１記載の座標入力システム。
【請求項８】
前記赤外光投写手段が、該赤外光投写手段の点灯及び消灯のタイミングと、前記第一の撮像情報及び前記第二の撮像情報のフレームの切り替わりタイミングとを同期させる、赤外光源同期点灯制御手段を有することを特徴とする請求項１記載の座標入力システム。
【請求項９】
前記撮像情報処理手段が、前記赤外光投写手段の消灯時に前記撮像手段が出力する前記第二の撮像情報の輝度レベルと所定のスレッショルドレベルとを比較する、外乱判別比較器を有することを特徴とする請求項１記載の座標入力システム。
【請求項１０】
画像光投写手段から投写された画像光が結像される透過型スクリーンに座標入力機能を与える座標入力装置において、
前記透過型スクリーンの背面に赤外光を投写する赤外光投写手段と、
前記透過型スクリーンの前面で反射手段を備える指示手段によって反射された赤外光を前記透過型スクリーンの背面から撮影する撮像手段と、
前記赤外光投写手段点灯時に前記撮像手段が出力する第一の撮像情報と、前記赤外光投写手段消灯時に前記撮像手段が出力する第二の撮像情報とを、前記画像光投写手段の投写画像のタイミングに同期して取得し、前記第一の撮像情報と前記第二の撮像情報との差分をとり、該差分を基に前記指示手段が指定する前記透過型スクリーン上の座標を求める撮像情報処理手段と、を有することを特徴とする座標入力装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、背面投写型表示装置などの画像表示用の透過型スクリーンに、デジタイザ機能つまり位置座標入力機能を与える為の、座標入力システム及び座標入力装置に関する。
【０００２】
【従来の技術】
近年、パーソナルコンピューターと、液晶その他のライトバルブやＣＲＴを用いた投写型表示装置の普及により、電子画像情報を拡大投影する形態でのプレゼンテーションが広く行われている。この時、画像表示用のスクリーン上で直接位置指示操作ができるならば、プレゼンテーションの説明者はスクリーンの位置から離れることなくコンピューターの操作ができること、及びスクリーンに対して直接手書き文字入力が可能になることによって、より効果的で効率的なプレゼンテーションが実現する。そこで、スクリーン上での位置座標入力方法が開発されている。
【０００３】
画像表示用の透過型スクリーン上での位置座標入力方式の一例として、特開昭６０−２３０２２８号公報記載の方法がある。これは図１６に示す様に構成されている。すなわち、透過型スクリーン１０２に画像光を結像させる画像投写装置である投写管１０４と共に透過型スクリーン１０２の背後に設けたＰＳＤなどの位置検出装置１０３により、ラインペンなどの発光型指示器１０１の投写する不可視光スポット、例えば赤外光スポットを検出し、発光型指示器１０１の位置座標を求める。
【０００４】
【発明が解決しようとする課題】
しかしながら、ライトペンなどの発光型指示器１０１は、発光源であるＬＥＤや制御回路、さらには電池等を内蔵する必要があり、形状が大きくかつ重量も重い。したがって、取扱者が発光型指示器１０１を手にして、透過型スクリーン１０２上に位置指示や手書き文字入力を行う場合、通常のペンなどの筆記用具を取り扱う場合と比べて、扱いにくいという課題を有していた。
【０００５】
そこで本発明は、透過型スクリーン上での使い勝手の良い座標入力システム及び座標入力装置を実現することを目的とする。
【０００６】
【課題を解決するための手段】
（１）本発明の座標入力システムは、画像光投写手段から投写された画像光が結像される透過型スクリーンに座標入力機能を与える座標入力システムにおいて、
前記透過型スクリーンの背面に赤外光を投写する赤外光投写手段と、
前記透過型スクリーンの前面で反射手段を備える指示手段によって反射された赤外光を前記透過型スクリーンの背面から撮影する撮像手段と、
前記赤外光投写手段点灯時に前記撮像手段が出力する第一の撮像情報と、前記赤外光投写手段消灯時に前記撮像手段が出力する第二の撮像情報とを、前記画像光投写手段の投写画像のタイミングに同期して取得し、前記第一の撮像情報と前記第二の撮像情報との差分をとり、該差分を基に前記指示手段が指定する前記透過型スクリーン上の座標を求める撮像情報処理手段と、を有することを特徴とする。
【０００７】
上記構成によれば、指示手段には、光を反射する機能が備わっていれば良いので、電池や電子部品を内蔵する必要はない。例えば、ペンなど通常の筆記用具と同様な形状の先端に反射材を設けた形式とすることができ、通常の筆記用具と同様な形状と重量を実現できるので、使用者が手にした場合、違和感なく取り扱え、使い勝手が良いという効果を有する。
また、前記画像光投写手段の投写画像のタイミング、例えば投射画像におけるフレームのタイミングに同期して、赤外光投写手段点灯時に撮像手段が出力する第一の撮像情報と赤外光投写手段消灯時に撮像手段が出力する第二の撮像情報とを取得しているので、第一の撮像情報及び第二の撮像情報は連続したフレームにおける撮像情報となる。そして、連続するフレームの画像はほぼ同一となることから、第一の撮像情報及び第二の撮像情報の差分をとることで、位置座標検出において外乱光となる透過型スクリーンによる画像光の反射成分を除去でき、検出系のＳ／Ｎ比、すなわち位置座標の検出精度を向上できるという効果を有する。
【０００８】
（２）また、本発明の座標入力システムは、前記赤外光投写手段から前記透過型スクリーンの背面に投写される赤外光の投写光軸が、前記透過型スクリーンの面と直交しないことを特徴とする。
【０００９】
上記構成によれば、赤外光源の投写赤外光の透過型スクリーン裏面による反射光の光軸つまり最大強度方向が、スクリーン面の直交方向と角度差を持つ為に、撮像手段の入射光軸がスクリーン面の直交方向である場合において、裏面反射赤外光の撮像手段への入射量が少なくなり、検出系のＳ／Ｎ比（信号ノイズ比）を向上できるという効果を有する。
【００１０】
（３）また、本発明の座標入力システムは、上記（１）に記載の座標入力システムにおいて、前記撮像手段の光軸が、前記透過型スクリーンの面と直交しないことを特徴とする。
【００１１】
上記構成によれば、赤外光源のスクリーン裏面による反射光及び画面表示用の画像光のスクリーン裏面による反射光の光軸が、それぞれスクリーン面の直交方向である場合、撮像手段へのそれら反射光の入射量が少なくなり、検出系のＳ／Ｎ比を向上できるという効果を有する。
【００１２】
（４）また、本発明の座標入力システムは、上記（１）に記載の座標入力システムにおいて、前記赤外光投写手段が、前記透過型スクリーンの背面のそれぞれ異なる領域に赤外光を投写する複数の赤外光源からなることを特徴とする。
【００１３】
上記構成によれば、ひとつの赤外光源を用いて透過型スクリーン背面に赤外光を投写する場合に比べて、透過型スクリーン背面全体に、均一に赤外光を投写することができ、検出系のＳ／Ｎ比を向上できるという効果を有する。
【００１４】
（５）また、本発明の座標システムは、上記（４）に記載の座標システムにおいて、前記複数の赤外光源のそれぞれの投写光軸が前記透過型スクリーンの面と直交せず、かつ前記投写光軸の前記透過型スクリーンの面に対する入射角度が、それぞれ異なることを特徴とする。
【００１５】
上記構成によれば、複数の赤外光源の投写光軸を透過型スクリーン面に対して各赤外光源ごとに入射角度を変えて、できるだけ斜めに入射する様に設定することができる。したがって、赤外光源から投写した光の透過型スクリーンによる裏面反射光の最大強度分布は、透過型スクリーンの面の直交方向に対して大きく角度差を持たせることができる。一方、撮像手段の光軸は、撮像画像に台形歪みを生じない様、一般的に透過型スクリーン面に対して直交させる。よって、赤外光源の透過型スクリーンでの裏面反射光の撮像手段への入射量を少なくでき、検出系のＳ／Ｎ比を向上できるという効果を有する。
【００１６】
（６）また、本発明の座標入力システムは、上記（１）に記載の座標入力システムにおいて、前記指示手段の反射手段が、赤外光に対して選択性を持つ反射材であることを特徴とする。
【００１７】
上記構成によれば、光反射型指示具による赤外光以外の反射を抑制することができる。よって、位置検出とは無関係の透過型スクリーンに投写される画像光の反射を防ぐことができ、検出系のＳ／Ｎ比を向上できるという効果を有する。
【００１８】
（７）また、本発明の座標入力システムは、上記（１）に記載の座標入力システムにおいて、前記指示手段の反射手段が、赤外光を選択的に透過する光学フィルタと、光反射材とからなることを特徴とする。
【００１９】
上記構成によれば、光反射型指示具による赤外光以外の反射を抑制し、検出系のＳ／Ｎ比を向上できるという効果を、例えば、光学ガラスフィルタと鏡といった一般的な光学部品によって容易に実現することができる。
【００２４】
（８）また、本発明の座標入力システムは、上記（１）に記載の座標入力システムにおいて、前記赤外光投写手段が、該赤外光投写手段の点灯及び消灯のタイミングと、前記第一の撮像情報及び前記第二の撮像情報のフレームの切り替わりタイミングとを同期させる、赤外光源同期点灯制御手段を有することを特徴とする。
【００２５】
上記構成によれば、連続した２つのフレーム（単位画像）において、赤外光源が点灯、消灯した場合の撮像手段の画像を得ることができる。赤外光源の点灯時撮像手段が出力する画像情報と、消灯時の画像情報との差分を得るには、連続した２フレーム間の差分をとれば良い。したがって、離れた２フレーム間の差分をとるよりも、高速な処理が実現できるという効果を有し、更に差分処理に必要なフレームメモリであるＦＩＦＯの容量を最小限の１フレーム分に抑えることができる効果も有する。
【００２８】
（９）また、本発明の座標入力システムは、上記（１）に記載の座標入力システムにおいて、前記撮像情報処理手段が、前記赤外光投写手段の消灯時に前記撮像手段が出力する前記第二の画像情報の輝度レベルと所定のスレッショルドレベルとを比較する、外乱判別比較器を有することを特徴とする。
【００２９】
上記構成によれば、ある一定値以上の外乱がある場合、座標検出を禁止し、誤入力を事前に防ぐことができるという効果を有する。
【００３０】
（１０）また、本発明の座標入力装置は、画像光投写手段から投写された画像光が結像される透過型スクリーンに座標入力機能を与える座標入力装置において、
前記透過型スクリーンの背面に赤外光を投写する赤外光投写手段と、
前記透過型スクリーンの前面で反射手段を備える指示手段によって反射された赤外光を前記透過型スクリーンの背面から撮影する撮像手段と、
前記赤外光投写手段点灯時に前記撮像手段が出力する第一の撮像情報と、前記赤外光投写手段消灯時に前記撮像手段が出力する第二の撮像情報とを、前記画像光投写手段の投写画像のタイミングに同期して取得し、前記第一の撮像情報と前記第二の撮像情報との差分をとり、該差分を基に前記指示手段が指定する前記透過型スクリーン上の座標を求める撮像情報処理手段と、を有することを特徴とする。
【００３１】
上記構成によれば、指示手段には、光を反射する機能が備わっていれば良いので、電池や電子部品を内蔵する必要はない。例えば、ペンなど通常の筆記用具と同様な形状の先端に反射材を設けた形式とすることができ、通常の筆記用具と同様な形状と重量を実現できるので、使用者が手にした場合、違和感なく取り扱え、使い勝手が良い座標入力装置が得られ、効果的で効率的なプレゼンテーションが実現できるという効果を有する。
【００３２】
【発明の実施の形態】
以下、本発明の実施形態を図面に基づいて説明する。
【００３３】
（第１実施形態）
図１は、本発明に係わる座標入力システムの一実施形態を示す斜視図である。透過型スクリーン２上での座標入力機能に関して、光反射型指示具１、赤外光源３、ＣＣＤカメラ４、撮像情報処理回路５を有する。プロジェクター７は、例えば、液晶ライトバルブと投写光源と投写光学系を内蔵した液晶プロジェクターであり、透過型スクリーン２に画像光を結像させる手段である。
【００３４】
赤外光源３は、透過型スクリーン２の背面全体に不可視光である赤外光を投写する赤外光投写手段であり、例えば赤外波長ＬＥＤを用いる。複数個の赤外波長ＬＥＤをアレイ状に並べたものを使用することで、より十分な赤外光出力を得ることができる。なお、不可視光である赤外光を投写することで、可視光である画像光の干渉をさけることができる。
【００３５】
ＣＣＤカメラ４は、赤外光源３から放射された赤外光の光反射型指示具１による反射光を検出する為に、透過型スクリーン２の背面全体を撮像する撮像手段である。このＣＣＤカメラ４は、赤外光を検出するので赤外光に対して選択的な感度を持たせることが望ましく、例えば赤外通過フィルタを備えた２次元ＣＣＤが望ましい。
【００３６】
光反射型指示具１は、取扱者８が透過型スクリーン２の前面、つまり画像光を投写している背面と対向する面から透過型スクリーン２を指し示す為の指示具であり、少なくともその先端に光反射材を有する。例えば、指示具先端に金属めっきを施した指示具や、指示具先端に鏡を有する指示具、または全体が光を反射する金属で作られている指示具である。
【００３７】
図２は、本発明の座標入力システムの撮像情報処理回路の一例を示すブロック図であり、図３は図２のブロック図の動作を示すタイミングチャートである。これらも用いながら、図１の座標検出動作を以下に説明する。
【００３８】
取扱者８が光反射型指示具１により透過型スクリーン２の任意の位置を指示した場合、赤外光源３から放射された赤外光は透過型スクリーン２を通過し、光反射型指示具１で反射する。ここで透過型スクリーン２は、画像光を結像させる為に光を拡散させる機能を有している。したがって、光反射型指示具１で反射して再び透過型スクリーンを通過して戻ってくる赤外反射光は拡散してほぼ無指向性となる為、スポット状の赤外光としてＣＣＤカメラ４において撮像ができる。
【００３９】
ＣＣＤカメラ４の撮像情報である輝度信号１３を撮像情報処理回路５により処理して座標情報６を求める。なお図３では、光反射型指示具１により反射された赤外光は、ＣＣＤカメラの画素の水平（ライン）方向の複数画素分の幅を持ち、垂直方向には１画素分の幅を持つ画像として撮像された例を示しており、ＣＣＤの撮像情報である輝度信号１３は、スポット光の輝度成分１８を持つ。
【００４０】
撮像情報処理回路５においては、まず、スレッショルド電圧１７を持つ比較器１１で、外乱光の輝度成分１９を取り除き、波形整形輝度信号１４を得る。次に、座標情報生成保持回路１２でこの波形整形輝度信号１４から光スポット座標情報の検出及び保持を行う。座標情報はＣＣＤフレーム５０内における光スポットの出現タイミングから求めることができるが、光スポットは一定の大きさを持つために波形整形輝度信号１４のパルス幅は一定の幅を持つので、幅の中心のタイミングを求める必要がある。そこで、座標情報生成保持回路１２において、フレーム先頭から波形整形輝度信号１４の立ち上がりまでの時間ＴＡ６１とフレーム先頭から波形整形輝度信号１４の立ち下りまでの時間ＴＢ６２の平均値を求めるなどして、光スポットの中心のタイミングＴ６３を得る。ＴＡ６１とＴＢ６２は、波形整形輝度信号１４のタイミングにおいて、フレームタイミング発生回路１０が生成するフレーム内の時間情報を示す水平・垂直カウンタ信号１６を参照することによって求める。また、フレームタイミング発生回路１０が出力するフレーム同期信号１５によってＣＣＤカメラ４のフレームタイミングと水平・垂直カウンタ信号１６の同期をとっておく。
【００４１】
以上の様にして、光反射型指示具１の指示位置である座標情報６を得ることができる。
【００４２】
ここで、撮像手段としてＣＣＤカメラのかわりに２次元ＰＳＤセンサを用いることもできる。２次元ＰＳＤセンサは、受光した光スポットのＸ及びＹ方向の重心座標をアナログ出力するので、複雑な撮像情報処理回路なしに座標情報を得ることができる利点がある。
【００４３】
なお、本発明の座標入力システムは、背面投写型表示装置に広く適用することができる。箱型の筐体を持った背面投写型表示装置に適用した一例を図４を用いて以下に説明する。
【００４４】
図４は、本発明に係わる座標入力システムを備えた表示装置の一実施形態を示す斜視図である。背面投写型表示装置２０の透過型スクリーン２２上での座標入力機能に関して、光反射型指示具２１、赤外光源２３、ＣＣＤカメラ２４、撮像情報処理回路２５を内蔵する。また、表示装置としての機能に関し、プロジェクター２６、ミラー２８を介し、透過型スクリーン２２を有する。ミラー２８を設けることで、透過型スクリーン２２への投写距離を保ちながら背面投写型表示装置２０の奥行きを短くしている。
【００４５】
赤外光源２３及びＣＣＤカメラ２４を、背面投写型表示装置２０内部の下部からミラー２８を介して透過型スクリーン２２を見込むようにセッティングすることで、光反射型指示具２１の反射赤外光をＣＣＤカメラ２４で撮像することが可能になり、その撮像情報を撮像情報処理回路２５で処理することで、取扱者２７が透過型スクリーン２２上に指示する光反射型指示具２１の反射赤外光座標情報を得ることができる。また、内蔵するコンピューター２９と撮像情報処理回路２５を接続することで、反射型指示具２１によってコンピューター２９を操作することができる。
【００４６】
(第２実施形態）
図５は、本発明の座標入力システムの一実施形態を示している。
【００４７】
これは図１の座標入力システムにおいて、赤外光源の投写光軸３０が、透過型スクリーン２の面に対して直交しないものであり、説明しやすい様、スクリーン側面方向から見た平面図としている。
【００４８】
図５において、透過型スクリーン２上での座標入力機能に関しては、光反射型指示具１、赤外光源３、ＣＣＤカメラ４、撮像情報処理回路５を有し、座標情報６を得る。プロジェクター７は、例えば、液晶ライトバルブと投写光源と投写光学系を内蔵した液晶プロジェクターであり、透過型スクリーン２に画像光を結像させる手段である。
【００４９】
赤外光源３は、透過型スクリーン２の背面全体に不可視光である赤外光を投写する赤外光投写手段であり、例えば赤外波長ＬＥＤを用いる。複数個の赤外波長ＬＥＤをアレイ状に並べたものを使用することで、より十分な赤外光出力を得ることができる。なお、不可視光である赤外光を投写することで、可視光である画像光の干渉をさける。
【００５０】
ＣＣＤカメラ４は、赤外光源３から放射された赤外光の光反射指示具１による反射光を検出する為に、透過型スクリーン２の背面全体を撮像する撮像手段である。このＣＣＤカメラ４は、赤外光を検出するので赤外光に対して選択的な感度を持たせることが望ましく、例えば赤外通過フィルタを備えた２次元ＣＣＤが望ましい。
【００５１】
光反射型指示具１は、取扱者８が透過型スクリーン２の前面、つまり画像光を投写している背面と対向する面から透過型スクリーン２を指し示す為の指示具であり、少なくともその先端に光反射材を有する。例えば、指示具先端に金属めっきを施した指示具や、指示具先端に鏡を有する指示具、または全体が光を反射する金属で作られている指示具である。
【００５２】
赤外光源３から投写された赤外光の一部は、透過型スクリーン２の裏面で反射する。この反射光は、光反射型指示具１からの反射光のＳ／Ｎ比を低下させる為、座標検出上好ましくない。そこで、本実施形態は透過型スクリーン２による裏面反射光を低減することを目的としており、以下にその動作を説明する。
【００５３】
赤外光源の投写光軸３０を透過型スクリーン２の面と直交させた場合を考えてみると、透過型スクリーン２による裏面反射赤外光も透過型スクリーン２の面の直交方向に最大指向方向をもつことになるが、図５の様に、赤外光源の投写光軸３０が透過型スクリーン２の面と直交しない場合、透過型スクリーン２による裏面反射赤外光の指向特性３１の最大指向方向は、透過型スクリーン２の面の直交方向に対して角度差を持つ。ここで、ＣＣＤカメラの入射光軸３２は、撮像画像に台形歪みを生じない様、透過型スクリーン２に対してほぼ直交している。したがって、裏面反射赤外光がＣＣＤカメラ４に直接入射しないので、検出系のＳ／Ｎ比を向上することができる。
【００５４】
なお、赤外光源の投写光軸３０を投写型スクリーン２の面と直交しない様に設定することによる、光反射型指示具１からの反射光の指向特性への影響はほとんど無い。これは、投写型スクリーン２の光拡散性による為であり、光反射型指示具の反射光の指向特性３３は、ほぼ無指向性のままである。
【００５５】
（第３実施形態）
図６は、本発明に係る座標入力システムの一実施形態を示している。
【００５６】
図１の座標入力システムにおいて、ＣＣＤカメラの入射光軸３４が、透過型スクリーン２の面に対して直交しないものであり、説明しやすい様、スクリーン側面方向から見た平面図としている。
【００５７】
図６において、透過型スクリーン２上での座標入力機能に関しては、光反射型指示具１、赤外光源３、ＣＣＤカメラ４、撮像情報処理回路５を有し、座標情報６を得る。プロジェクター７は、例えば、液晶ライトバルブと投写光源と投写光学系を内蔵した液晶プロジェクターであり、透過型スクリーン２に画像光を結像させる手段である。
【００５８】
赤外光源３は、透過型スクリーン２の背面全体に不可視光である赤外光を投写する赤外光投写手段であり、例えば赤外波長ＬＥＤを用いる。複数個の赤外波長ＬＥＤをアレイ状に並べたものを使用することで、より十分な赤外光出力を得ることができる。なお、不可視光である赤外光を投写することで、可視光である画像光の干渉をさける。
【００５９】
ＣＣＤカメラ４は、赤外光源３から放射された赤外光の光反射指示具１による反射光を検出する為に、透過型スクリーン２の背面全体を撮像する撮像手段である。このＣＣＤカメラ４は、赤外光を検出するので赤外光に対して選択的な感度を持たせることが望ましく、例えば赤外通過フィルタを備えた２次元ＣＣＤが望ましい。
【００６０】
光反射型指示具１は、取扱者８が透過型スクリーン２の前面、つまり画像光を投写している背面と対向する面から透過型スクリーン２を指し示す為の指示具であり、少なくともその先端に光反射材を有する。例えば、指示具先端に金属めっきを施した指示具や、指示具先端に鏡を有する指示具、または全体が光を反射する金属で作られている指示具である。
【００６１】
本実施形態は、ＣＣＤカメラ４に入射する、透過型スクリーン２による裏面反射光を低減できることに特徴があるが、その理由を以下に説明すると、赤外光源３とプロジェクター７の投写光軸は、透過型スクリーンの面と直交している為、それぞれの裏面反射光の最大指向方向もほぼ透過型スクリーン２の面と直交する。よって、ＣＣＤカメラの入射光軸３４が透過型スクリーン２の面と直交しないことによって、直交する場合と比べて、赤外光源３の裏面反射赤外光とプロジェクター７の画像光の裏面反射光のＣＣＤカメラ４への入射量は低減され、光反射型指示具の赤外反射光のＳ／Ｎ比を向上することができる。
【００６２】
なお、撮像手段の入射光軸３４を透過型スクリーン２の面と直交しない様に設定することで、ＣＣＤカメラ４が透過型スクリーン２を撮像した画像情報に台形歪みが生ずるが、撮像情報処理回路５において座標補正を行うことで、台形歪みの影響を除去することができる。
【００６３】
（第４実施形態）
図７は、本発明にかかる座標入力システムの光反射型指示具の一実施形態を示している。
【００６４】
光反射型指示具１の先端に、赤外光反射膜３５を設ける。これは、赤外光の波長領域にに対して選択性を持つ金属薄膜である。
【００６５】
赤外光反射膜３５により、赤外光が選択的に反射される。透過型スクリーン面に投写される光には、赤外光の他に可視光である画像光があるが、画像光の反射を抑制するので、光反射型指示具の赤外反射光のＳ／Ｎ比を向上することができる。
【００６６】
なお、金属薄膜以外でも、誘電体多層膜等、赤外線に対して選択性を持つ反射材であれば同様な効果を得ることができる。
【００６７】
（第５実施形態）
図８は、本発明に係る座標入力システムの光反射型指示具の一実施形態を示している。
【００６８】
光反射型指示具１の先端に、赤外透過フィルタ３６と、鏡３７を設けている。赤外透過フィルタは、赤外光の波長領域に対して選択性に透過性を持つ光学フィルタである。
【００６９】
赤外透過フィルタ３６に入射した光は、鏡３７で反射して、再び赤外透過フィルタ３６を透過して出射するので、赤外光を選択的に反射する指示具として機能する。透過型スクリーン裏面から投写される光には、赤外光の他に可視光である画像光もあるが、画像光の反射は抑制されるので、光反射型指示具の赤外反射光のＳ／Ｎ比を向上することができる。
【００７０】
本実施形態においては、赤外透過フィルタとして、ガラスフィルタやプラスチックフィルタを使用することができる。反射型の薄膜フィルタに比べて、スクリーンとの摩擦がある場合でも、膜剥離による特性変化がない為、指示具先端に用いるのに優れている。また、赤外透過フィルタと鏡という一般的な光学部品によって、容易に機能を実現することができる。
【００７１】
(第６実施形態）
図９は、本発明にかかる座標入力システムの一実施形態を示している。
【００７２】
これは、図１の座標入力システムにおいて、ＣＣＤカメラ４に、赤外透過フィルタを設けると同時に、赤外光源を複数設け、かつ赤外光源の投写光軸が、透過型スクリーン２の面に対して直交しないものであり、説明しやすい様、スクリーン側面方向から見た平面図としている。
【００７３】
図９において、透過型スクリーン２上での座標入力機能に関しては、光反射型指示具１、赤外光源３８Ａ及び赤外光源３８Ｂ、ＣＣＤカメラ４、撮像情報処理回路５を有し、座標情報６を得る。プロジェクター７は、例えば、液晶ライトバルブと投写光源と投写光学系を内蔵した液晶プロジェクターであり、透過型スクリーン２に画像光を結像させる手段である。
【００７４】
赤外光源３８Ａ及び赤外光源３８Ｂは、透過型スクリーン２の背面全体に不可視光である赤外光を投写する赤外光投写手段であり、例えば赤外波長ＬＥＤを用いる。複数個の赤外波長ＬＥＤをアレイ状に並べたものを使用することで、より十分な赤外光出力を得ることができる。なお、不可視光である赤外光を投写することで、可視光である画像光の干渉をさける。
【００７５】
ＣＣＤカメラ４は、赤外光源３から放射された赤外光の光反射指示具１による反射光を検出する為に、透過型スクリーン２の背面全体を撮像する撮像手段である。このＣＣＤカメラ４は、赤外光を検出するので赤外光に対して選択的な感度を持たせる為に、赤外透過フィルタ３９を備える。
【００７６】
光反射型指示具１は、取扱者８が透過型スクリーン２の前面、つまり画像光を投写している背面と対向する面から透過型スクリーン２を指し示す為の指示具であり、少なくともその先端に光反射材を有する。例えば、指示具先端に金属めっきを施した指示具や、指示具先端に鏡を有する指示具、または全体が光を反射する金属で作られている指示具である。
【００７７】
ここで、本実施形態の１つの特徴である、赤外光源３８Ａ及び赤外光源３８Ｂという、複数の赤外光源を有することについて説明する。
【００７８】
赤外光源は、光反射型指示具１を検出する為に、透過型スクリーン２の面全体に対して、できる限り均一に赤外光を投写する必要がある。赤外光源がひとつの場合を考えると、光源の輝度分布は、一般に光源の投写光軸の中心がもっとも輝度が高く、周辺の輝度が低い為、透過型スクリーン２の周辺に十分赤外光を投写できない場合がある。そこで、本実施形態では、赤外光源３８Ａと赤外光源３８Ｂの複数の光源を用いて、透過型スクリーン２の裏面のそれぞれ異なる領域に赤外光を投写することによって、より均一な赤外光投写を実現する。
【００７９】
なお、本実施形態においては、赤外光源が２つの例を説明したが、３つ以上設けても良い。赤外投写光の均一性が更に向上する効果がある。
【００８０】
また、本実施形態の１つの特徴である、複数の赤外光源の投写光軸の透過型スクリーンに対する入射角度がそれぞれ異なることについて説明する。
【００８１】
赤外光源の投写光軸を透過型スクリーン２の面と直交させた場合を考えてみると、透過型スクリーン２による裏面反射赤外光も透過型スクリーン２の面の直交方向に最大指向方向をもつことになる。ＣＣＤカメラの入射光軸３２は、撮像画像に台形歪みを生じない様、透過型スクリーン２に対して直交させる。よって、裏面反射光がＣＣＤカメラ４に入射しやすくなる。したがって、赤外光源の投写光軸は、透過型スクリーン２に対して直交せず、できる限り透過型スクリーン２に対して斜めに入射することが望ましい。
【００８２】
赤外光源３８Ａと赤外光源３８Ｂで、透過型スクリーン２の裏面に赤外光を投写する場合、それぞれの光軸の透過型スクリーン２に対する入射角度を変える、例えば図９の様に赤外光源３８Ａの投写光軸３０Ａと赤外光源３８Ｂの投写光軸３０Ｂが交差する様に光軸を設定することで、透過型スクリーンに対してより斜めに赤外光を投写することができる。この時、透過型スクリーン２による赤外光源３８Ａの裏面反射光の指向特性３１Ａと、赤外光源３８Ｂの裏面反射光の指向特性３１Ｂは、図９の様に、透過型スクリーン２の面の直交方向に対して大きく角度差をもち、透過型スクリーン２の面の直交方向への反射光の強度を低く押さえることができる。したがって、裏面反射赤外光がＣＣＤカメラ４に直接入射しないので、検出系のＳ／Ｎ比を向上することができる。
【００８３】
さらに、本実施形態の１つの特徴である、ＣＣＤカメラの入射光軸３２上に設けた赤外通過フィルタ３９について説明する。
【００８４】
この赤外通過フィルタ３９は、赤外波長領域の光を選択的に通過させる光学フィルタであり、例えば、ガラスフィルタである。勿論、プラスチックフィルタや、金属薄膜フィルタ、もしくは誘電体多層膜フィルタでもかまわない。この赤外透過フィルタ３９に入射する光には、可視光である画像光の透過型スクリーン２での裏面反射光や、透過型スクリーン２の表面から透過する外乱光等が含まれる。赤外透過フィルタ３９によって、これら座標検出とは関係のない非赤外光の外乱光を光学的に除去し、検出系のＳ／Ｎ比を向上することができる。
【００８５】
また、赤外透過フィルタ３９に帯域通過フィルタを用い、その光透過波長領域と、光反射型指示具１が選択的に反射する赤外光の波長領域とを、一致させることによって、座標検出とは関係のない赤外光波長の外乱光を光学的に除去することができ、検出系のＳ／Ｎ比を向上することができる。
【００８６】
（第７実施形態）
図１０は、本発明にかかるの座標入力システムの一実施形態を示すブロック図である。
【００８７】
撮像手段として、ＣＣＤカメラ４を用いる。
【００８８】
撮像情報処理回路４６は、ＣＣＤカメラ４の出力情報から座標情報６を生成する処理回路であり、Ａ／Ｄコンバーター４０、ＦＩＦＯ４１、減算器４２、絶対値回路４３、比較器４４、座標情報生成保持回路４５、フレームタイミング発生回路４９を含む。Ａ／Ｄコンバーター４０は、ＣＣＤ輝度信号５２をアナログ信号からデジタル信号へ変換する。ＦＩＦＯ４１は、ＣＣＤの１フレーム分の容量を持つ先読み先出しメモリで、デジタル信号である輝度信号５３を１フレーム分遅延するのに用いる。座標情報生成保持回路４５では座標情報の生成と保持を行う。また、フレームタイミング発生回路４９が出力するフレーム同期信号１５によってＣＣＤカメラ４のフレームタイミングと水平・垂直カウンタ信号１６の同期をとる。
【００８９】
図１１は、図１０のブロック図の動作を示すタイミングチャートである。また、この時の動作を説明する為に、赤外光源点灯時のＣＣＤ撮像画像の一例を図１２に、赤外光源消灯時のＣＣＤ撮像画像の一例を図１３に示す。これらにより、本実施形態である図１０の動作説明を以下に行う。
【００９０】
赤外光源点灯時のフレームの画像７５及び赤外光源消灯時のフレームの画像７６に現れている外乱光７１は、例えば投写型スクリーンに対する直射日光の差し込みであり、光反射型指示具によるスポット光７０を検出する上で外乱となる。ここで、外乱光７１は直射日光などほぼ静止状態であるので複数フレームにわたり出現するのに対し、スポット光７０は、赤外光源点灯時のフレームのみに現れ、赤外光源消灯時のフレームの画像７６には現れない。ＣＣＤカメラ４の出力である輝度信号５３にはこれらスポット光の輝度成分７２と外乱光の輝度成分７３が現れている。
【００９１】
赤外光源状態５６を、連続するＣＣＤフレームごとに点灯、消灯を繰り返す様にするならば、連続するフレームの輝度信号５３の差分をとることで、連続するフレームに共に現れる外乱光の輝度成分７３を除去し、１フレームおきに現れるスポット光の輝度成分７２を抽出することができる。１フレーム遅延輝度信号５８と遅延の無い輝度信号５３とを減算器４４に入力し、差分輝度信号５４を得る。
【００９２】
その差分輝度信号５４の絶対値を絶対値回路４３により求め、差分輝度信号５４の負の値の成分を正の値に変換する。そして絶対値回路出力信号５５を比較器４４により正の値のスレッショルド電圧６０で波形整形すると波形整形された比較器出力信号５９が得られる。そして、座標情報生成保持回路４５において、フレームタイミング発生回路４９が生成する水平・垂直カウンタ信号１６を比較器出力信号５９が変化するタイミングで参照することによって得た時間情報を座標情報６へ変換する。なお、反射型指示具による反射スポットは一定の大きさを持つために、スポット光の中心を検出するには、比較器出力信号５９の輝度成分の時間幅の中心を求める必要がある。そこで、座標情報生成保持回路４５において、フレーム先頭から比較器出力信号５９の立ち上がりまでの時間ＴＡ７７とフレーム先頭から比較器出力信号５９の立ち下りまでの時間ＴＢ７８の平均値を求めるなどして、光スポットの中心のタイミングＴ７９を得る。
【００９３】
以上の様に、撮像情報処理回路４６において、赤外光源の点灯時と消灯時の輝度信号の差分をとることにより、位置検出とは全く関係のない外乱光の影響を除去することができる。
【００９４】
（第８実施形態）
図１０及び図１１には、本発明に係る座標入力システムの一実施形態が含まれている。
【００９５】
即ち、ＣＣＤフレームタイミングを示す信号、ここでは２フレーム分の時間を１周期とし、フレーム切り替わりに同期して状態が変化する信号であるフレーム倍周期信号５１によって、光反射型指示具を検出する為の赤外光源の点灯制御を行う赤外光源同期点灯制御回路４７を制御する。これによりＣＣＤフレームの切り替わりに同期して赤外光源状態５６が点灯または消灯へと変化する。
【００９６】
この場合、連続したフレームにおいて、赤外光源が点灯、消灯した場合のＣＣＤカメラ４の画像情報を得ることができる。赤外光源の点灯時の画像情報と、消灯時の画像情報との差分を得る場合、連続した２フレーム間の差分をとれば良いので、離れた２フレーム間の差分をとるよりも、高速な処理が実現できる。
【００９７】
（第９実施形態）
図１０及び図１１には、本発明に係る座標入力システムの一実施形態が含まれている。
【００９８】
即ち、 ＣＣＤフレームタイミングを示す信号、ここでは２フレーム分の時間を１周期とし、フレーム切り替わりに同期して状態が変化する信号であるフレーム倍周期信号５１によって、 プロジェクターの投写映像フレーム同期制御回路４８を制御する。これによりＣＣＤフレームと画像表示用の映像フレーム５７が同期する。
【００９９】
このとき、画像光はその連続したフレーム間で強い相関性を持っている、つまり連続するフレームの画像はほぼ同一である場合が多い為に、連続したフレームの画像情報間の差分をとることによって、位置座標検出において外乱となる画像光のスクリーン裏面の影響をほとんど除去することができる。
【０１００】
（第１０実施形態）
図１４は、本発明にかかる座標入力システムの一実施形態を示すブロック図である。
【０１０１】
撮像手段としてＣＣＤカメラ４を用いる。
【０１０２】
撮像情報処理回路８２は、座標検出回路８１と外乱判別比較器８０とフレームタイミング発生回路４９から成る。座標検出回路８１は、ＣＣＤカメラ４の出力情報である輝度信号９１と、ＣＣＤフレーム内のタイミングを示す水平・垂直カウンタ信号１６から座標情報６を生成及び保持する回路である。フレームタイミング発生回路４９は、ＣＣＤフレームのタイミングを発生する回路で、フレーム同期信号１５によってＣＣＤカメラ４のフレームタイミングと水平・垂直カウンタ信号１６の同期をとる。また、２フレーム分の時間を１周期とし、フレーム切り替わりに同期して状態が変化する信号であるフレーム倍周期信号５１で赤外光源同期点灯制御回路４７を制御することによって、フレームの切り替わりに同期して赤外光を点滅させる。
【０１０３】
外乱判別比較器８０は、外乱判別手段であり、ＣＣＤカメラ４の出力である輝度信号９１から外乱光のレベルを判定し、ある一定以上の外乱光が存在する場合、外乱判別信号９２により、座標検出回路８１に対して座標検出動作を禁止させる。
【０１０４】
図１５は、図１４のブロック図の動作を示すタイミングチャートであり、これを用いて図１４の動作説明を以下に行う。
【０１０５】
フレーム倍周期信号５１によって赤外光源同期点灯制御手段回路４７を制御する為、赤外光源状態５６は、フレーム毎に点灯、消灯を繰り返す。ここで、赤外光源が消灯時の輝度成分は光反射型指示具からの反射光によるものではないので外乱成分である。これを検出する為に、外乱判別比較器８０の輝度レベル判定動作９０は赤外光源消灯フレームにおいて有効にする。
【０１０６】
赤外光源点灯フレームにおける輝度信号９１の光反射型指示具によるスポット光の輝度成分９７は輝度レベル判定動作９０が無効である為に無視されるが、赤外光源消灯フレームにおける外乱光の輝度成分９８がある場合、外乱判別比較器８０は、所定のスレッショルド電圧９９を超える場合に外乱を検出したものとして、外乱判別信号９２を有効にし、座標検出回路８１へ伝達することで座標検出動作を禁止させる。外乱判別信号９２は、一度外乱光の輝度成分９８を検出すると少なくとも輝度レベル判別動作９０が無効から有効に変化するまで状態を保持し、確実に外乱による誤動作を防ぐ。
【０１０７】
以上の様に、赤外光源の消灯時に撮像手段が出力する画像情報の輝度レベルが設定した判定レベルを超えた場合、座標検出を禁止する、外乱判別比較器を有することで、ある一定以上の外乱がある場合、座標検出を禁止し、誤入力を事前に防ぐことができる。
【０１０８】
（変形形態）
以上説明した実施形態に限定されることなく、種々の変形や変更が可能であって、それらも本発明の均等の範囲内である。
【０１０９】
（１）  プロジェクターは、液晶ライトバルブを内蔵した液晶プロジェクターの例で説明したが、マイクロマシン技術を応用したミラーデバイスを用いた光変調手段を内蔵したプロジェクターや、ＣＲＴを用いたプロジェクター等、いかなるプロジェクターを用いてもよい。
【０１１０】
（２）  座標入力システムとして実施形態を説明したが、これら座標入力技術は、投写型表示装置のスクリーンに座標入力機能を与える技術であり、そのまま座標入力装置に適用できる技術である。
【０１１１】
【発明の効果】
以上述べた様に、画像表示用の透過型スクリーンに座標入力機能を与える座標入力システムにおいて、透過型スクリーンの背面に赤外光を投写する赤外光投写手段と、赤外光投写手段から投写された赤外光を反射する光反射手段を先端に備える指示手段と、透過型スクリーンの前面から前記指示手段によって反射された赤外光を投写型スクリーンの背面から撮影する撮像手段と、撮像手段からの出力画像信号から指示手段が指定する透過型スクリーン上の座標を求める撮像情報処理手段とを有する座標入力システムとすることで、位置指示具に電池や電子部品を内蔵する必要がなく、使い勝手の良い座標入力システムを実現できる。
【図面の簡単な説明】
【図１】本発明にかかる座標入力システムの一実施形態を示す斜視図。
【図２】本発明にかかる座標入力システムの撮像情報処理回路の一例を示すブロック図。
【図３】本発明にかかる座標入力システムの撮像情報処理回路の一例の動作を示すタイミングチャート。
【図４】本発明にかかる座標入力システムの一実施形態を示す斜視図。
【図５】本発明にかかる座標入力システムの一実施形態を示す図。
【図６】本発明にかかる座標入力システムの一実施形態を示す図。
【図７】本発明にかかる座標入力システムの光反射型指示具の一実施形態を示す図。
【図８】本発明にかかる座標入力システムの光反射型指示具の一実施形態を示す図。
【図９】本発明にかかる座標入力システムの一実施形態を示す図。
【図１０】本発明にかかる座標入力システムの一実施形態を示すブロック図。
【図１１】本発明にかかる座標入力システムの一実施形態の動作を示すタイミングチャート。
【図１２】本発明にかかる座標入力システムを説明する為の赤外光源点灯時のＣＣＤ撮像画像の一例を示す図。
【図１３】本発明にかかる座標入力システムを説明する為の赤外光源消灯時のＣＣＤ撮像画像の一例を示す図。
【図１４】本発明にかかる座標入力システムの一実施形態を示すブロック図。
【図１５】本発明にかかる座標入力システムの一実施形態の動作を示すタイミングチャート。
【図１６】従来の座標入力システムの一例を示す図。
【符号の説明】
１．光反射型指示具
２．透過型スクリーン
３．赤外光源
４．ＣＣＤカメラ
５．撮像情報処理回路
６．座標情報
７．プロジェクター
８．取扱者
１０．フレームタイミング発生回路
１１．比較器
１２．座標情報生成保持回路
１３．輝度信号
１４．波形整形輝度信号
１５．フレーム同期信号
１６．水平・垂直カウンタ信号
１７．スレッショルド電圧
１８．スポット光の輝度成分
１９．外来光の輝度成分
２０．背面投写型表示装置
２１．光反射型指示具
２２．透過型スクリーン
２３．赤外光源
２４．ＣＣＤカメラ
２５．撮像情報処理回路
２６．プロジェクター
２７．取扱者
２８．ミラー
２９．コンピューター
３０．赤外光源の投写光軸
３０Ａ．赤外光源３８Ａの投写光軸
３０Ｂ．赤外光源３８Ｂの投写光軸
３１．裏面反射赤外光の指向特性
３１Ａ．赤外光源３８Ａの裏面反射赤外光の指向特性
３１Ｂ．赤外光源３８Ｂの裏面反射赤外光の指向特性
３２．ＣＣＤカメラの入射光軸
３３．光反射型指示具の反射光の指向特性
３４．ＣＣＤカメラの入射光軸
３５．赤外光反射膜
３６．赤外透過フィルタ
３７．鏡
３８Ａ．赤外光源
３８Ｂ．赤外光源
３９．赤外透過フィルタ
４０．Ａ／Ｄコンバーター
４１．ＦＩＦＯ
４２．減算器
４３．絶対値回路
４４．比較器
４５．座標情報生成保持回路
４６．撮像情報処理回路
４７．赤外光源同期点灯制御回路
４８．投写映像フレーム同期制御回路
４９．フレームタイミング発生回路
５０．ＣＣＤフレーム
５１．フレーム倍周期信号
５２．ＣＣＤ輝度信号
５３．輝度信号
５４．差分輝度信号
５５．絶対値回路出力信号
５６．赤外光源状態
５７．映像フレーム
５８．１フレーム遅延輝度信号
５９．比較器出力信号
６０．スレッショルド電圧
６１．ＴＡ
６２．ＴＢ
６３．Ｔ
７０．スポット光
７１．外乱光
７２．スポット光の輝度成分
７３．外乱光の輝度成分
７５．赤外光源点灯時のフレームの画像
７６．赤外光源消灯時のフレームの画像
７７．ＴＡ
７８．ＴＢ
７９．Ｔ
８０．外乱判別比較器
８１．座標検出回路
８２．撮像情報処理回路
９０．輝度レベル判定動作
９１．輝度信号
９２．外乱判別信号
９７．スポット光の輝度成分
９８．外乱光の輝度成分
９９．スレッショルド電圧
１０１．発光型指示器
１０２．透過型スクリーン
１０３．位置検出装置
１０４．投写管
【図１】
0003794180.tif 000002
【図２】
0003794180.tif 000003
【図３】
0003794180.tif 000004
【図４】
0003794180.tif 000005
【図５】
0003794180.tif 000006
【図６】
0003794180.tif 000007
【図７】
0003794180.tif 000008
【図８】
0003794180.tif 000009
【図９】
0003794180.tif 000010
【図１０】
0003794180.tif 000011
【図１１】
0003794180.tif 000012
【図１２】
0003794180.tif 000013
【図１３】
0003794180.tif 000014
【図１４】
0003794180.tif 000015
【図１５】
0003794180.tif 000016
【図１６】
0003794180.tif 000017