(57)【要約】【課題】より多面的で多彩な画像情報を観察者に提示可能な画像投影システムを提供する。【解決手段】可視光を透過すると共に任意の領域に可視光を反射する反射領域を形成可能なスクリーン６０、スクリーン６０に向けて画像光を投影可能なプロジェクタ４０、スクリーン６０を制御すると共に、スクリーン６０の背後に配置された対象物ＴＧへスクリーン６０の透過領域を通じて投影するための画像及びスクリーン６０に形成された反射領域６１に投影するための反射領域用画像をプロジェクタ４０に出力可能なサーバ５０等から構成される。【選択図】図１
2008109433.tif 000002
【特許請求の範囲】
【請求項１】
可視光を透過する透過領域と共に可視光を反射する反射領域を形成可能なスクリーンと、
前記スクリーンに向けて画像光を投影する投影手段と、
前記スクリーンの前記透過領域及び前記反射領域の形成を制御すると共に、前記スクリーンの背後に配置された対象物へ前記スクリーンの透過領域を通じて投影するための透過領域用画像及び前記スクリーンに形成された反射領域に投影するための反射領域用画像を前記投影手段に出力する制御手段と、
を有することを特徴とする画像投影システム。
【請求項２】
前記投影手段の投影領域を撮像する撮像手段をさらに有し、
前記制御手段は、前記撮像手段の撮像画像に基くアノテーション画像を出力可能に形成されている、ことを特徴とする請求項１に記載の画像投影システム。
【請求項３】
前記制御手段は、前記スクリーンの共通領域を交互に透過領域と反射領域にすると共に、前記共通領域が透過領域となっている際と前記共通領域が反射領域となっている際とで異なる画像を出力することを特徴とする請求項1又は２に記載の画像投影システム。
【請求項４】
前記制御手段は、前記スクリーンの共通領域を交互に透過領域と反射領域にすると共に、前記共通領域に向けて重合せ用画像を前記対象物に重なるように出力する、ことを特徴とする請求項１ないし３のいずれかに記載の画像投影システム。
【請求項５】
前記制御手段は、前記共通領域が反射領域となっている際に、前記重合せ用画像を前記対象物に重なるように出力する、ことを特徴とする請求項４に記載の画像投影システム。
【請求項６】
前記制御手段は、前記共通領域が透過領域となっている際には、前記撮像手段の撮像画像に基くアノテーション画像を前記対象物に投影させ、
前記共通領域が反射領域となっている際には、前記重合せ用画像の対応位置に前記アノテーション画像を出力する、ことを特徴とする請求項５に記載の画像投影システム。
【請求項７】
前記制御手段は、前記重合せ用画像として、前記対象物の外形を示す画像及び前記対象物の内部構造を示す画像の少なくともいずれかを出力する、ことを特徴とする請求項４ないし６のいずれかに記載の画像投影システム。
【請求項８】
前記制御手段は、前記スクリーンの透過領域を使用して前記撮像手段の撮像画像に基くアノテーション画像を前記対象物に投影させると共に、前記スクリーンに形成した反射領域に前記対象物に関わる画像を投影させることを特徴とする請求項１又は２に記載の画像投影システム。
【請求項９】
前記制御手段は、前記スクリーンの前記アノテーション画像が投影される領域の位置に応じて前記対象物に関わる画像を投影させる反射領域を形成する位置を変更する、ことを特徴とする請求項８に記載の画像投影システム。
【請求項１０】
前記制御手段は、反射領域を形成する位置が確保できない場合には、前記スクリーンの共通領域を交互に透過領域と反射領域にして前記対象物に関わる画像を投影させる、ことを特徴とする請求項９に記載の画像投影システム。
【請求項１１】
前記制御手段は、前記対象物に関わる画像として、前記対象物の分解図を示す画像及び組立、分解作業手順を示す画像の少なくともいずれかを投影させる、ことを特徴とする請求項９又は１０に記載の画像投影システム。
【請求項１２】
コンピュータを、可視光を透過する透過領域と共に可視光を反射する反射領域を形成可能なスクリーンの前記透過領域及び前記反射領域の形成を制御すると共に、前記スクリーンの背後に配置された対象物へ前記スクリーンの透過領域を通じて投影するための透過領域用画像及び前記スクリーンに形成された反射領域に投影するための反射領域用画像を投影手段に出力する制御手段として機能させることを特徴とする画像投影システム用プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、アノテーション画像等の各種画像を実物体に投影する画像投影システムに関する。
【背景技術】
【０００２】
例えば、遠隔修理システム、遠隔保守システム、遠隔医療システム、遠隔会議システム等の遠隔システムにおいては、遠隔側から実物体側へ向けて作業手順の指示等の各種指示を行う必要がある。このような、遠隔側から実物体側への指示を行うことができる遠隔指示システムとしては、例えば、実物体側に存在する実物体をビデオカメラで撮像しつつその撮像画像を遠隔端末に送信すると共に、遠隔端末において撮像画像に基づいて指示されたアノテーション画像を実物体側でプロジェクタにより実物体へ投影する技術が知られている（例えば、特許文献１、２等参照）。
また、いわゆる複合現実感と呼ばれる映像処理技術の分野では、透明部材にホログラム光学素子等で形成された透明な表示フィルムを貼着し、プロジェクタから表示フィルムに向けて画像を投影することにより、表示フィルムに情報画像を表示しつつ、透明部材の前方に配置された実物体を透視することができる技術を開示している。
【特許文献１】米国特許公開２００４／００７０６７４号公報
【特許文献２】特開２００５−３３７５６号公報
【特許文献３】特開平９−３３８５６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
上記した遠隔指示システム等においては、実物体へ投影されるアノテーション画像は、単なるポインタとしてではなくポイント機能に加えて画像情報を提供する役割を果たすので、実物体側と遠隔端末側との間のコミュニケーションをより円滑化させることができる。
ところで、アノテーション画像が投影される実物体を観察する者は、遠隔端末からの指示によりアノテーション画像以外にも有用な画像情報、例えば、実物体の内部構造、組立手順等の情報を提示できれば遠隔との間でさらに円滑なコミュニケーションが可能になると考えられる。
しかしながら、画像を投影できる範囲は、基本的には実物体上に限られている。例えば、特許文献３に開示された技術を用いて、プロジェクタから表示フィルムに向けて各種画像を投影することにより、表示フィルムに各種画像を表示しつつ、透明部材の前方に配置された実物体を透視することは可能であるが、この場合には、実物体へアノテーション画像を投影することができない。
【０００４】
本発明は、上記問題に鑑みて成されたものであり、その目的とするところは、遠隔指示システム等に適用される画像投影システムにおいて、より多面的で多彩な画像情報を観察者に提示可能な画像投影システムを提供することにある。
【課題を解決するための手段】
【０００５】
本発明に係る画像投影システムは、可視光を透過する透過領域と共に可視光を反射する反射領域を形成可能なスクリーンと、スクリーンに向けて画像光を投影する投影手段と、スクリーンの透過領域及び反射領域の形成を制御すると共に、スクリーンの背後に配置された対象物へスクリーンの透過領域を通じて投影するための透過領域用画像及びスクリーンに形成された反射領域に投影するための反射領域用画像を前記投影手段に出力する制御手段と、を有することを特徴としている。
【０００６】
上記構成において、前記投影手段の投影領域を撮像する撮像手段をさらに有し、前記制御手段は、前記撮像手段の撮像画像に基くアノテーション画像を出力可能に形成されている、構成を採用できる。
【０００７】
上記構成において、前記制御手段は、前記スクリーンの共通領域を交互に透過領域と反射領域にすると共に、前記共通領域が透過領域となっている際と前記共通領域が反射領域となっている際とで異なる画像を出力する、構成を採用できる。
【０００８】
上記構成において、前記制御手段は、前記スクリーンの共通領域を交互に透過領域と反射領域にすると共に、前記共通領域に向けて重合せ用画像を前記対象物に重なるように出力する、構成を採用できる。
【０００９】
上記構成において、前記制御手段は、前記共通領域が反射領域となっている際に、前記重合せ用画像を前記対象物に重なるように出力する、構成を採用できる。
【００１０】
上記構成において、前記制御手段は、前記共通領域が透過領域となっている際には、前記撮像手段の撮像画像に基くアノテーション画像を前記対象物に投影させ、前記共通領域が反射領域となっている際には、前記重合せ用画像の対応位置に前記アノテーション画像を出力する、構成を採用できる。
【００１１】
上記構成において、前記制御手段は、前記重合せ用画像として、前記対象物の外形を示す画像及び前記対象物の内部構造を示す画像の少なくともいずれかを出力する、構成を採用できる。
【００１２】
上記構成において、前記制御手段は、前記スクリーンの透過領域を使用して前記撮像手段の撮像画像に基くアノテーション画像を前記対象物に投影させると共に、前記スクリーンに形成した反射領域に前記対象物に関わる画像を投影させる、構成を採用できる。
【００１３】
上記構成において、前記制御手段は、前記スクリーンの前記アノテーション画像が投影される領域の位置に応じて前記対象物に関わる画像を投影させる反射領域を形成する位置を変更する、構成を採用できる。
【００１４】
上記構成において、前記制御手段は、反射領域を形成する位置が確保できない場合には、前記スクリーンの共通領域を交互に透過領域と反射領域にして前記対象物に関わる画像を投影させる、構成を採用できる。
【００１５】
上記構成において、前記制御手段は、前記対象物に関わる画像として、前記対象物の分解図を示す画像及び組立手順を示す画像の少なくともいずれかを投影させる、構成を採用できる。
【００１６】
本発明の画像投影用プログラムは、コンピュータを、可視光を透過する透過領域と共に可視光を反射する反射領域を形成可能なスクリーンの前記透過領域及び前記反射領域の形成を制御すると共に、前記スクリーンの背後に配置された対象物へ前記スクリーンの透過領域を通じて投影するための透過領域用画像及び前記スクリーンに形成された反射領域に投影するための反射領域用画像を投影手段に出力する制御手段として機能させることを特徴としている。
【発明の効果】
【００１７】
本発明の請求項１によれば、対象物に加えてスクリーンの反射領域にも画像を投影でき、より多面的で多彩な画像情報を対象物の観察者に提示可能となる。
【００１８】
本発明の請求項２によれば、撮像画像に基くアノテーション画像をスクリーンの反射領域及びスクリーンの背後の対象物に投影できる。
【００１９】
本発明の請求項３によれば、対象物に投影した画像と反射領域に投影した画像を合成できる。
【００２０】
本発明の請求項４及び５によれば、対象物とその重合せ用画像を重ね合わせて写し出すことができる。
【００２１】
本発明の請求項６によれば、対象物とその重合せ用画像の対応位置にそれぞれアノテーション画像を付けることができる。
【００２２】
本発明の請求項７によれば、対象物とその重合せ用画像の照合が容易となり、又対象物の内部構造が容易に把握できる。
【００２３】
本発明の請求項８によれば、アノテーション画像と共に対象物に関する他の画像情報を同時に提示することができる。
【００２４】
本発明の請求項９によれば、アノテーション画像の投影位置の移動に伴って反射領域が移動するので、反射領域にアノテーション画像が投影されず、視認性が低下するのを防止できる。
【００２５】
本発明の請求項１０によれば、反射領域を確保できない場合にも、視認性が低下するのを防ぎつつアノテーション画像以外の画像情報を提供できる。
【００２６】
本発明の請求項１１によれば、対象物に対してアノテーション画像を投影しながら、対象物の分解図や組立手順を提示することができる。
【発明を実施するための最良の形態】
【００２７】
以下、本発明の最良の実施形態について、添付図面を参照しつつ説明する。
図１は、本発明の一実施形態に係る画像投影システムが適用された遠隔指示システムの構成図である。
この遠隔指示システムは、図１に示すように、実物体である対象物ＴＧ側に設置された、撮像手段としてのビデオカメラ２０、投影手段としてのプロジェクタ４０、制御手段としてのサーバ５０、スクリーン６０、ネットワーク３００を介してサーバ５０に接続される遠隔端末１００等から構成されている。尚、図１においては、遠隔端末１００を一台のみ示しているが、複数の遠隔端末１００がネットワーク３００を通じてサーバ５０へ接続され得る。
ビデオカメラ２０は、例えば、ＣＣＤカメラで構成され、対象物ＴＧを撮像可能な位置に配置されていると共に、その撮像画像はサーバ５０に取り込まれる。
【００２８】
プロジェクタ４０は、ビデオカメラ２０に隣接して設置されており、その画角（視野）がビデオカメラ２０の画角（視野）に略一致するように配置されている。このプロジェクタ４０には、液晶プロジェクタ等が使用される。
【００２９】
サーバ５０は、プロセッサ、半導体メモリ、記憶装置、通信装置等のハードウエア及び所要のソフトウエアによりそれぞれ構成されており、ビデオカメラ２０、プロジェクタ４０及び後述するスクリーン６０の動作を制御すると共に、ネットワーク３００を介して遠隔端末１００との間で各種情報を授受する。
サーバ５０は、ビデオカメラ２０の撮像画像を遠隔端末１００へ送信すると共に遠隔端末１００でなされた撮像画像に基づく指示（描画コマンド等）に応じたアノテーション画像をプロジェクタ４０により対象物ＴＧへ投影させる。サーバ５０は、ビデオカメラ２０の撮像画像を画像処理する機能を備えており、例えば、ビデオカメラ２０の撮像画像に基づいて、投影されるアノテーション画像やＣＡＤ図面の画像の位置等を認識可能となっている。尚、アノテーション画像には、線、文字、図形等のあらゆる形態の画像が含まれる。
サーバ５０は、遠隔端末１００等から指示された対象物ＴＧに関わるＣＡＤ図面等の画像をプロジェクタ４０によりスクリーン６０の後述する反射領域へ投影させる。尚、対象物ＴＧに関わる画像には、実際の対象物ＴＧに重ねるための重合せ用画像、対象物ＴＧのＣＡＤ図面の画像、対象物ＴＧの分解図の画像、対象物ＴＧの組立手順、取り扱い手順を示す画像等の対象物ＴＧに関わるあらゆる画像が含まれ、これらの画像データは、例えば、サーバ５０の記憶装置や他の専用の記憶装置等に記憶され、遠隔端末１００等からの指示に応じて読み出し可能となっている。
【００３０】
スクリーン６０は、可視光を透過すると共に任意の領域に可視光を反射する反射領域を形成可能となっている。したがって、プロジェクタ４０（ビデオカメラ２０）側から対象物ＴＧを観察すると、スクリーン６０に反射領域を形成していない状態では、スクリーン６０を介して対象物ＴＧを観察できる。このスクリーン６０は、例えば、反射型液晶、偏光制御素子等で形成され、サーバ５０からの制御指令６０ｓに応じた任意の指定領域（共通領域）を透明領域から反射領域に変えることができる。形成された反射領域にプロジェクタ４０により画像を投影させると、プロジェクタ４０（ビデオカメラ２０）側からこの投影された画像を観察できる。尚、スクリーン６０を制御する制御指令６０ｓは、サーバ５０自体の判断で生成することも可能であるし、遠隔端末１００等からの指示に基いて生成することも可能である。
【００３１】
遠隔端末１００は、液晶表示装置、ＣＲＴ等からなる表示装置１１０、ネットワーク３００に接続されたコンピュータ１２０、コンピュータ１２０に接続されたポインティングデバイス（マウス）１３０等から構成されている。
表示装置１１０は、その表示画面１１１にサーバ５０から送信されるビデオカメラ２０の撮像画像等の画像を表示する。
【００３２】
次に、サーバ５０によるスクリーン６０を利用した画像投影処理の一例について図２ないし図６を参照して説明する。
ここで、図２はサーバ５０によるスクリーン６０を利用した画像投影処理の全体の流れを示すフローチャート、図３はサーバ５０によるスクリーン６０の反射領域への投影処理の一例を示すフローチャート、図４はサーバ５０によるスクリーン６０の透過領域への投影処理の一例を示すフローチャート、図５はスクリーン６０における指定領域とアノテーション画像との関係を説明するための図、図６はスクリーン６０の反射領域を常時表示状態にしている例を示す図、及び図７はスクリーン６０の反射領域を点滅表示状態にしている例を示す図である。なお、図５から図７に示す対象物写真はラティス・テクノロジー社製ＸＶＬの商品である。
【００３３】
図２に示すように、先ず、スクリーン６０の初期化処理を実行する（ステップＳＴ１）。具体的には、スクリーン６０の全領域を透過領域として、対象物ＴＧがプロジェクタ４０の側から観察できる状態にする。
【００３４】
次いで、遠隔端末１００からのアノテーション画像の描画やＣＡＤ図面等の描画の指示等からなるメッセージ待ちループを開始する（ステップＳＴ２）。
遠隔端末１００からメッセージを受け取ると、そのメッセージ内容が画像の追加あるいは削除を指示しているかを判断する（ステップＳＴ３）。すなわち、スクリーン６０を通じて対象物ＴＧへアノテーション画像を投影する指示の場合やスクリーン６０の後述する反射領域へ図面等の画像を投影する指示の場合は、画像の追加指示と判断し、提示用画像を投影するのか、アノテーション画像を投影するのかを判断する（ステップＳＴ４）。
そして、提示用画像を投影する指示を受けた場合には、スクリーン６０の後述する反射領域への投影処理を実行し（ステップＳＴ５）、アノテーション画像を投影する指示を受けた場合には後述する透過領域への投影処理を実行する（ステップＳＴ６）。
【００３５】
一方、ステップＳＴ３において、画像の削除を指示されている場合には、削除が要求されているのが重合せ用画像であるのか、対象物に投影されているアノテーション画像であるのかを判断し（ステップＳＴ７）、重合せ用画像である場合には、その図面データ等を削除して（ステップＳＴ８）、後述するスクリーン６０の指定領域を透過領域に切り換え（ステップＳＴ９）、対象物に投影されているアノテーション画像である場合には、アノテーション画像を削除する（ステップＳＴ１０）。
そして、終了要求があるかを判断し（ステップＳＴ１１）、終了要求があるまで、ステップＳＴ２〜ステップＳＴ１０の処理を繰り返す。
【００３６】
ここで、図２のステップＳＴ５における反射領域への投影処理は、図３に示すように、先ず、スクリーン６０が点滅表示状態に設定されているか、常時表示状態に設定されているかを判断する（ステップＳＴ２１）。
ここで、スクリーン６０の点滅表示とは、例えば、図５に示すようなスクリーン６０の指定領域を交互に透過領域と反射領域にすることをいうものとする。スクリーン６０の常時表示とは、スクリーン６０の指定領域を継続的に反射領域にして、常時この反射領域に画像を表示（投影）可能な状態にすることをいうものとする。また、スクリーン６０の指定領域は、サーバ５０自体が算出することにより、あるいは、遠隔端末１００からの指示等によりサーバ５０が認識している領域である。
【００３７】
常時表示の場合には、スクリーン６０の指定領域内にアノテーション画像があるかを判断する（ステップＳＴ２２）。具体的には、図５に示すように、スクリーン６０の指定領域を、対象物ＴＧに投影すべきアノテーション画像ＡＤＲの画像光が通過するかを判断する。
図５に示す例では、アノテーション画像ＡＤＲは指定領域内になので、この場合には、図６に示すように、指定領域を透過領域から反射領域６２に切り換える（ステップＳＴ２５）。
【００３８】
指定領域を反射領域６２に切り換えたのち、反射領域６２に投影すべき画像のＣＡＤ図面、組立図、分解図等の図面データを受領する（ステップＳＴ２６）。
そして、図６に示すように、反射領域６２に図面データからなる提示画像ＰＤＲを投影する。尚、図６に示す例では、提示画像ＰＤＲは、対象物ＴＧの分解図である。
この状態においては、プロジェクタ４０側から対象物ＴＧを観察するユーザの視点ＵＥからは、反射領域６２に投影された提示画像ＰＤＲと共に、透過領域６１を通じて対象物ＴＧの像が見える。また、後述するように、上記のステップＳＴ６における透過領域６１への投影処理により、図５に示すように、アノテーション画像ＡＤＲが透過領域６１を通じて対象物ＴＧへ投影されると、このアノテーション画像ＡＤＲもユーザの視点ＵＥから見えることになる。
【００３９】
図３のステップＳＴ２２において、スクリーン６０の指定領域内にアノテーション画像がある場合には、このアノテーション画像と干渉しない（アノテーション画像の画像光が通過しない）代替領域を探索し（ステップＳＴ２３）、代替領域が存在する（確保できる）かを判断する（ステップＳＴ２４）。
【００４０】
ステップＳＴ２４において、代替領域が存在する場合には、その代替領域を指定領域として上記したステップＳＴ２５〜ステップＳＴ２７の処理を実行する。例えば、図５に示したように、アノテーション画像ＡＤＲが通過する領域以外に余剰の領域が広く存在する場合には、代替領域を確保することができる。このようにして、スクリーン６０のアノテーション画像ＡＤＲが投影される領域の位置に応じて対象物ＴＧに関わる画像である提示画像ＰＤＲを投影させる反射領域６２を形成する位置を変更する。
【００４１】
ステップＳＴ２４において、代替領域が存在しない（確保できない）場合には、その指定領域を交互に透過領域６１及び反射領域６２に切り換え（ステップＳＴ２８）、図面データを受領し（ステップＳＴ２６）。その図面データを反射領域６２に切り換わった状態で提示画像ＰＤＲとして投影させる（ステップＳＴ２７）。このような投影処理を実行することにより、提示画像ＰＤＲを提示するための指定領域が確保できない場合であっても、視認性は低下するが、アノテーション画像ＡＤＲに加えて提示画像ＰＤＲをユーザに提示することができる。
【００４２】
次に、上記のステップＳＴ２１において点滅表示状態に設定されている場合について説明する。
点滅表示状態に設定されている場合には、前提条件として、プロジェクタ４０から視たスクリーン６０内の指定領域内に対象物ＴＧが収まるように指定領域が設定されているものとする。
【００４３】
そして、指定領域を交互に透過領域６１及び反射領域６２に切り換え（ステップＳＴ２８）、ステップＳＴ２６及びステップＳＴ２７の処理を実行する。
具体的には、図７（Ａ）に示すように、指定領域を反射領域６２にした状態で、反射領域６２に重合せ用画像ＰＤＲ１をユーザの視点ＵＥから視て対象物ＴＧに重なって見えるように投影する。このときの、重合せ用画像ＰＤＲ１は、例えば、対象物ＴＧの完成形状、目標形状等の画像である。このとき、対象物ＴＧに投影すべきアノテーション画像ＡＤＲに対応するアノテーション画像ＡＤＲ１を重合せ用画像ＰＤＲ１に合成して出力することができる。
その後、図７（Ｂ）に示すように、指定領域が透過領域６１に切り換わると、重合せ用画像ＰＤＲ１及びアノテーション画像ＡＤＲ１の出力を停止すると共に、後述する透過領域投影処理ルーチン（図４参照）によりアノテーション画像ＡＤＲがスクリーン６０を通じて対象物ＴＧに投影される。
そして、図７（Ａ）及び図７（Ｂ）の状態が交互に形成されると、ユーザの視点ＵＥからは、実物である対象物ＴＧと重合せ用画像ＰＤＲ１とが精度良く重ね合わさって見え、例えば、対象物ＴＧと重合せ用画像ＰＤＲ１との間の差異が一目瞭然となる。すなわち、対象物ＴＧと重合せ用画像ＰＤＲ１との照合が容易にできる。
また、対象物ＴＧ上のアノテーション画像ＡＤＲに対応するアノテーション画像ＡＤＲ１が反射領域６２に表示されるため、透過領域６１と反射領域６２とが交互に切り換わったとしても、ユーザの視点ＵＥからは、アノテーション画像が変化しない。
【００４４】
次に、アノテーション画像を投影する指示を受けた場合の透過領域への投影処理について図４を参照して説明すると、先ず、図３のステップＳＴ２１と同様に、スクリーン６０が点滅表示状態に設定されているか、常時表示状態に設定されているかを判断し（ステップＳＴ３１）、常時表示状態の場合には、スクリーン６０のアノテーション画像投影領域内に指定領域があるか（反射領域６２に切り換えるべき指定領域があるか）を判断する（ステップＳＴ３２）。
【００４５】
アノテーション画像投影領域と指定領域とが重ならない場合には、アノテーション画像情報を受領したのち（ステップＳＴ３５）、図５や図６に示したように、対象物ＴＧに対してアノテーション画像ＡＤＲを投影する（ステップＳＴ３６）。
一方、アノテーション画像投影領域と指定領域とが重なると視認性の観点から好ましくないので、スクリーン６０内に代替領域が存在しないかを探索し（ステップＳＴ３４）、存在する場合には、指定領域の位置を変更して上記と同様にアノテーション画像ＡＤＲを投影する（ステップＳＴ３５、ＳＴ３６）。
【００４６】
代替領域が存在しない場合には、その指定領域を交互に透過領域６１及び反射領域６２に切り換え（ステップＳＴ３７）、アノテーション画像情報を受領したのち（ステップＳＴ３５）、透過領域６１に切り換わった状態でアノテーション画像ＡＤＲを投影させる（ステップＳＴ３６）。このような投影処理を実行することにより、提示画像ＰＤＲを投影するための指定領域がアノテーション画像の投影領域とは独立に確保できない場合であっても、視認性は低下するが、アノテーション画像ＡＤＲと提示画像ＰＤＲとをユーザに提示することができる。
【００４７】
図４のステップＳＴ３１において、点滅表示状態に設定されている場合には、図７において説明したように、指定定領域を交互に透過領域６１及び反射領域６２に切り換え（ステップＳＴ３７）、ステップＳＴ３５及びステップＳＴ３６の処理を実行する。これにより、図７（Ａ）に示した状態と図７（Ｂ）に示した状態とが交互に形成される。
【００４８】
図８は、スクリーンの反射領域を点滅表示状態に設定している場合の他の例を示す図である。
図８に示す例においては、反射領域６２に重合せ用画像として、対象物ＴＧの内部構造示す画像ＰＤＲ２を投影する。
対象物ＴＧ（例えば、プリンタ装置）にその内部構造の画像ＰＤＲ２を重ね合わせると、ユーザの視点ＵＥからは、あたかも対象物ＴＧを透視したかのように見える。
【００４９】
図９は、スクリーンの反射領域を常時表示状態に設定している場合の他の例を示す図である。
図９に示す例においては、反射領域６２に提示画像として、対象物ＴＧ（例えば、複写機）の内部の組立手順あるいは分解手順を示す画像ＰＤＲ３を投影している。
このような構成とすることにより、対象物ＴＧに関してアノテーション画像ＡＤＲにより指示しながら、対象物ＴＧの組立手順あるいは分解手順を画像として提示することができる。
【００５０】
上記実施形態では、スクリーン６０を反射型液晶、偏光制御素子等を利用したものとしたが、これに限定されるわけではなく、選択的に透過領域と反射領域を形成できるものであればよい。
【００５１】
上記実施形態では、制御手段としてサーバ５０を例に挙げて説明したが、制御手段の機能を単一のコンピュータで実現しなくとも、複数のコンピュータを用いて実現することも可能である。
【００５２】
上記実施形態では、サーバ５０に画像投影システム用プログラムをインストールすることにより本発明の画像投影システムを構築することができるが、このプログラムは記録媒体に記録して提供することができ、又、インターネット等の通信手段によって提供することも可能である。
【図面の簡単な説明】
【００５３】
【図１】本発明の一実施形態に係る画像投影システムが適用された遠隔指示システムの構成図である。
【図２】サーバによるスクリーンを利用した画像投影処理の一例を示すフローチャートである。
【図３】サーバによるスクリーンの反射領域への投影処理の一例を示すフローチャートである。
【図４】サーバによるスクリーンの透過領域への投影処理の一例を示すフローチャートである。
【図５】スクリーンにおける指定領域とアノテーション画像との関係を説明するための図である。
【図６】スクリーンの反射領域を常時表示状態にしている例を示す図である。
【図７】スクリーンの反射領域を点滅表示状態にしている例を示す図である。
【図８】スクリーンの反射領域を点滅表示状態にしている他の例を示す図である。
【図９】スクリーンの反射領域を常時表示状態にしている他の例を示す図である。
【符号の説明】
【００５４】
２０…ビデオカメラ（撮像手段）
４０…プロジェクタ（投影手段）
５０…サーバ（制御手段）
６０…スクリーン
６１…透過領域
６２…反射領域
１００…遠隔端末
１１０…表示装置
１１１…表示画面
１２０…コンピュータ
３００…ネットワーク
ＴＧ…対象物
ＡＤＲ…アノテーション画像
ＰＤＲ，ＰＤＲ３…提示画像
ＰＤＲ１，ＰＤＲ２…重合せ用画像
【図１】
2008109433.tif 000003
【図２】
2008109433.tif 000004
【図３】
2008109433.tif 000005
【図４】
2008109433.tif 000006
【図５】
2008109433.tif 000007
【図６】
2008109433.tif 000008
【図７】
2008109433.tif 000009
【図８】
2008109433.tif 000010
【図９】
2008109433.tif 000011