(57)【要約】【課題】  投影領域側のユーザにとって見えにくい状態で投影される注釈画像の入力を減らすことができる遠隔指示システム、情報処理装置及び制御プログラムを提供する。【解決手段】  遠隔指示システムは、パーソナルコンピュータ（ＰＣ）１、ＰＣ２を備えており、これらは、ネットワーク３を介して互いに接続されている。ＰＣ１には、プロジェクタ４、ビデオカメラ５及び三次元計測装置７が接続されている。ＰＣ２の制御部２０１が、三次元測定装置７で測定された距離のデータに基づいて、ＰＣ２の表示部２０５に表示される背景が占める領域にアノテーション画像が含まれるか否かを判別し（ステップＳ１６）、当該背景が占める領域にアノテーション画像が含まれる場合に、表示部２０５に警告ダイアログを表示させる（ステップＳ１９）。【選択図】  図５
2008271156.tif 000002
【特許請求の範囲】
【請求項１】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される第１情報処理装置と、
前記注釈画像を入力する入力手段と、
前記入力された注釈画像、前記対象物及び前記背景を表示する表示手段と、
前記測定装置で測定された距離のデータに基づいて、前記表示手段に表示される背景が占める領域に前記注釈画像が含まれるか否かを判別する判別手段と、
前記背景が占める領域に前記注釈画像が含まれる場合に、警告を行う警告手段とを備える第２情報処理装置と
を有することを特徴とする遠隔指示システム。
【請求項２】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される第１情報処理装置と、
前記注釈画像を入力する入力手段と、
前記測定装置で測定された距離のデータ及び前記入力手段で入力された注釈画像に基づいて、前記投影装置により前記注釈画像が前記対象物及び前記背景に段差のある状態で投影されるか否かを判別する判別手段と、
前記投影装置により前記注釈画像が前記対象物及び前記背景に段差のある状態で投影される場合に、警告を行う警告手段とを備える第２情報処理装置と
を有することを特徴とする遠隔指示システム。
【請求項３】
前記第２情報処理装置は、
前記入力された注釈画像を構成する各点に対する、前記測定装置で測定された距離のデータを取得する取得手段と、
当該取得された距離のデータに対して、クラスタ解析を実行し、当該注釈画像を複数のクラスタに分割する分割手段とを備え、
前記判別手段は、当該分割された一のクラスタに対応する、前記測定装置で測定された距離と、当該分割された他のクラスタに対応する、前記測定装置で測定された距離との差が所定の距離よりも大きい場合に、前記投影装置により前記注釈画像が前記対象物及び前記背景に段差のある状態で投影されると判別することを特徴とする請求項２に記載の遠隔指示システム。
【請求項４】
前記警告手段は、前記入力手段で入力された注釈画像を前記投影装置に送信するか否かの応答又は当該注釈画像を修正するか否かの応答を求めることを特徴とする請求項１乃至３のいずれか１項に記載の遠隔指示システム。
【請求項５】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続されると共に、前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段を備える第１情報処理装置と、
前記注釈画像を入力する入力手段と、前記抽出された背景が占める領域を前記注釈画像の入力禁止領域として設定する設定手段とを備える第２情報処理装置と
を有することを特徴とする遠隔指示システム。
【請求項６】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される第１情報処理装置と、
前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段と、前記注釈画像を入力する入力手段と、前記抽出された背景が占める領域を前記注釈画像の入力禁止領域として設定する設定手段とを備える第２情報処理装置と
を有することを特徴とする遠隔指示システム。
【請求項７】
前記第２情報処理装置は、前記対象物及び前記背景を表示する表示手段を備え、前記入力手段で前記背景が占める領域に注釈画像を入力する場合に、前記表示手段は、当該背景が占める領域に入力禁止を示す情報を表示することを特徴とする請求項５又は６に記載の遠隔指示システム。
【請求項８】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される第１情報処理装置と、
前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段と、前記注釈画像を入力する入力手段と、前記投影装置により前記注釈画像が投影される注釈画像投影領域に段差がある場合に、前記注釈画像を移動および／または縮小して前記注釈画像が段差のない領域に投影されるように調整する調整手段とを備える第２情報処理装置と
を有することを特徴とする遠隔指示システム。
【請求項９】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と通信網を介して接続される情報処理装置であって、
前記注釈画像を入力する入力手段と、
前記入力された注釈画像、前記対象物及び前記背景を表示する表示手段と、
前記測定装置で測定された距離のデータに基づいて、前記表示手段に表示される背景が占める領域に前記注釈画像が含まれるか否かを判別する判別手段と、
前記背景が占める領域に前記注釈画像が含まれる場合に、警告を行う警告手段とを備えることを特徴とする情報処理装置。
【請求項１０】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と通信網を介して接続される情報処理装置であって、
前記注釈画像を入力する入力手段と、
前記測定装置で測定された距離のデータ及び前記入力手段で入力された注釈画像に基づいて、前記投影装置により前記注釈画像が前記対象物及び前記背景に段差のある状態で投影されるか否かを判別する判別手段と、
前記投影装置により前記注釈画像が前記対象物及び前記背景に段差のある状態で投影される場合に、警告を行う警告手段とを備えることを特徴とする情報処理装置。
【請求項１１】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続されると共に、前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段を備える外部情報処理装置と通信網を介して接続される情報処理装置であって、
前記注釈画像を入力する入力手段と、前記抽出された背景が占める領域を前記注釈画像の入力禁止領域として設定する設定手段とを備えることを特徴とする情報処理装置。
【請求項１２】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と通信網を介して接続される情報処理装置であって、
前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段と、前記注釈画像を入力する入力手段と、前記抽出された背景が占める領域を前記注釈画像の入力禁止領域として設定する設定手段とを備えることを特徴とする情報処理装置。
【請求項１３】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と接続される情報処理装置であって、
前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段と、前記注釈画像を入力する入力手段と、前記投影装置により前記注釈画像が投影される注釈画像投影領域に段差がある場合に、前記注釈画像を移動および／または縮小して前記注釈画像が段差のない領域に投影されるように調整する調整手段とを備えることを特徴とする情報処理装置。
【請求項１４】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と通信網を介して接続されるコンピュータを、
前記注釈画像を入力する入力手段、
前記入力された注釈画像、前記対象物及び前記背景を表示する表示手段、
前記測定装置で測定された距離のデータに基づいて、前記表示手段に表示される背景が占める領域に前記注釈画像が含まれるか否かを判別する判別手段、及び
前記背景が占める領域に前記注釈画像が含まれる場合に、警告を行う警告手段として機能させることを特徴とする制御プログラム。
【請求項１５】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と通信網を介して接続されるコンピュータを、
前記注釈画像を入力する入力手段、
前記測定装置で測定された距離のデータ及び前記入力手段で入力された注釈画像に基づいて、前記投影装置により前記注釈画像が前記対象物及び前記背景に段差のある状態で投影されるか否かを判別する判別手段、及び
前記投影装置により前記注釈画像が前記対象物及び前記背景に段差のある状態で投影される場合に、警告を行う警告手段として機能させることを特徴とする制御プログラム。
【請求項１６】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続されると共に、前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段を備える外部情報処理装置と通信網を介して接続されるコンピュータを、
前記注釈画像を入力する入力手段、及び前記抽出された背景が占める領域を前記注釈画像の入力禁止領域として設定する設定手段として機能させることを特徴とする制御プログラム。
【請求項１７】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と通信網を介して接続されるコンピュータを、
前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段、前記注釈画像を入力する入力手段、及び前記抽出された背景が占める領域を前記注釈画像の入力禁止領域として設定する設定手段として機能させることを特徴とする制御プログラム。
【請求項１８】
対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と接続されるコンピュータを、
前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段、前記注釈画像を入力する入力手段、前記投影装置により前記注釈画像が投影される注釈画像投影領域に段差がある場合に、前記注釈画像を移動および／または縮小して前記注釈画像が段差のない領域に投影されるように調整する調整手段として機能させることを特徴とする制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、遠隔指示システム、情報処理装置及び制御プログラムに関する。
【背景技術】
【０００２】
従来より、ビデオカメラ及びプロジェクタが接続されているサーバ（例えばコンピュータ）と、ネットワークを介して当該サーバに接続される遠隔地のクライアント（例えばコンピュータ）とを備える遠隔指示システムが知られている（例えば、特許文献１、２参照）。
【０００３】
この遠隔指示システムでは、サーバに接続されているビデオカメラが対象物として立体物を撮影し、ネットワークを介して撮影画像をクライアントに送信する。クライアントは、クライアントに接続されている表示装置の表示画面に立体物を含む撮影画像を表示し、当該表示画面上にアノテーション画像（線、図形、文字）などが書き込まれると、当該アノテーション画像をネットワークを介してサーバに送信する。サーバは受信したアノテーション画像をプロジェクタに送信し、プロジェクタは受信したアノテーション画像を立体物を含む投影領域の適切な位置（注釈画像投影領域）（これは、クライアントが、撮影画像の範囲内でアノテーション画像を書き込んだ位置に対応する）に投影する。
【０００４】
上記遠隔指示システムでは、クライアントのユーザは、表示装置の表示画面上にアノテーション画像として指示などを書き込むことができる。この指示は、立体物を含む投影領域の適切な位置に投影され、投影領域側のユーザは、当該投影された指示を見て、クライアントのユーザの意図を把握することができる。
【特許文献１】米国特許公開２００４／００７０６７４号公報
【特許文献２】特開２００５−３３７５６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、表示画面内の立体物が表示されている部分以外（即ち、背景）の場所に指示が書き込まれると、その指示は立体物よりも奥に投影されるため、焦点が合わないぼけた画像になる場合がある。その結果、投影領域側のユーザは、当該投影された指示を見ても、クライアントのユーザの意図を把握することができないという問題がしばしば生じている。
【０００６】
また、背景と立体物にまたがって記載される指示も、同様の理由から上記問題が生じている。
【０００７】
本発明は、このような事情に鑑みてなされたものであり、その目的は、投影領域側のユーザにとって見えにくい状態で投影される注釈画像の入力を減らすことができる遠隔指示システム、情報処理装置及び制御プログラムを提供することにある。具体的には、ビデオカメラが撮影する領域内においてビデオカメラ（または投影装置）からの距離情報を取得し、その距離情報からアノテーション画像の投影領域における落差を算出し、当該落差に応じてアノテーション画像の表示領域や表示形態（表示が可能か不可能化を含む）を制御する遠隔指示システム、情報処理装置及び制御プログラムを提供することにある。
【課題を解決するための手段】
【０００８】
上記目的を達成するため、請求項１の遠隔指示システムは、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される第１情報処理装置と、前記注釈画像を入力する入力手段と、前記入力された注釈画像、前記対象物及び前記背景を表示する表示手段と、前記測定装置で測定された距離のデータに基づいて、前記表示手段に表示される背景が占める領域に前記注釈画像が含まれるか否かを判別する判別手段と、前記背景が占める領域に前記注釈画像が含まれる場合に、警告を行う警告手段とを備える第２情報処理装置とを有することを特徴とする。
【０００９】
請求項２の遠隔指示システムは、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される第１情報処理装置と、前記注釈画像を入力する入力手段と、前記測定装置で測定された距離のデータ及び前記入力手段で入力された注釈画像に基づいて、前記投影装置により前記注釈画像が前記対象物及び前記背景に段差のある状態で投影されるか否かを判別する判別手段と、前記投影装置により前記注釈画像が前記対象物及び前記背景に段差のある状態で投影される場合に、警告を行う警告手段とを備える第２情報処理装置とを有することを特徴とする。
【００１０】
請求項３の遠隔指示システムは、請求項２に記載の遠隔指示システムにおいて、前記第２情報処理装置は、前記入力された注釈画像を構成する各点に対する、前記測定装置で測定された距離のデータを取得する取得手段と、当該取得された距離のデータに対して、クラスタ解析を実行し、当該注釈画像を複数のクラスタに分割する分割手段とを備え、前記判別手段は、当該分割された一のクラスタに対応する、前記測定装置で測定された距離と、当該分割された他のクラスタに対応する、前記測定装置で測定された距離との差が所定の距離よりも大きい場合に、前記投影装置により前記注釈画像が前記対象物及び前記背景に段差のある状態で投影されると判別することを特徴とする。
【００１１】
請求項４の遠隔指示システムは、請求項１乃至３のいずれか１項に記載の遠隔指示システムにおいて、前記警告手段は、前記入力手段で入力された注釈画像を前記投影装置に送信するか否かの応答又は当該注釈画像を修正するか否かの応答を求めることを特徴とする。
【００１２】
請求項５の遠隔指示システムは、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続されると共に、前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段を備える第１情報処理装置と、前記注釈画像を入力する入力手段と、前記抽出された背景が占める領域を前記注釈画像の入力禁止領域として設定する設定手段とを備える第２情報処理装置とを有することを特徴とする。
【００１３】
請求項６の遠隔指示システムは、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される第１情報処理装置と、前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段と、前記注釈画像を入力する入力手段と、前記抽出された背景が占める領域を前記注釈画像の入力禁止領域として設定する設定手段とを備える第２情報処理装置とを有することを特徴とする。
【００１４】
請求項７の遠隔指示システムは、請求項５又は６に記載の遠隔指示システムにおいて、前記第２情報処理装置は、前記対象物及び前記背景を表示する表示手段を備え、前記入力手段で前記背景が占める領域に注釈画像を入力する場合に、前記表示手段は、当該背景が占める領域に入力禁止を示す情報を表示することを特徴とする。
【００１５】
請求項８の遠隔指示システムは、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される第１情報処理装置と、前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段と、前記注釈画像を入力する入力手段と、前記投影装置により前記注釈画像が投影される注釈画像投影領域に段差がある場合に、前記注釈画像を移動および／または縮小して前記注釈画像が段差のない領域に投影されるように調整する調整手段とを備える第２情報処理装置とを有することを特徴とする。
【００１６】
請求項９の情報処理装置は、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と通信網を介して接続される情報処理装置であって、前記注釈画像を入力する入力手段と、前記入力された注釈画像、前記対象物及び前記背景を表示する表示手段と、前記測定装置で測定された距離のデータに基づいて、前記表示手段に表示される背景が占める領域に前記注釈画像が含まれるか否かを判別する判別手段と、前記背景が占める領域に前記注釈画像が含まれる場合に、警告を行う警告手段とを備えることを特徴とする。
【００１７】
請求項１０の情報処理装置は、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と通信網を介して接続される情報処理装置であって、前記注釈画像を入力する入力手段と、前記測定装置で測定された距離のデータ及び前記入力手段で入力された注釈画像に基づいて、前記投影装置により前記注釈画像が前記対象物及び前記背景に段差のある状態で投影されるか否かを判別する判別手段と、前記投影装置により前記注釈画像が前記対象物及び前記背景に段差のある状態で投影される場合に、警告を行う警告手段とを備えることを特徴とする。
【００１８】
請求項１１の情報処理装置は、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続されると共に、前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段を備える外部情報処理装置と通信網を介して接続される情報処理装置であって、前記注釈画像を入力する入力手段と、前記抽出された背景が占める領域を前記注釈画像の入力禁止領域として設定する設定手段とを備えることを特徴とする。
【００１９】
請求項１２の情報処理装置は、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と通信網を介して接続される情報処理装置であって、前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段と、前記注釈画像を入力する入力手段と、前記抽出された背景が占める領域を前記注釈画像の入力禁止領域として設定する設定手段とを備えることを特徴とする。
【００２０】
請求項１３の情報処理装置は、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と接続される情報処理装置であって、前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段と、前記注釈画像を入力する入力手段と、前記投影装置により前記注釈画像が投影される注釈画像投影領域に段差がある場合に、前記注釈画像を移動および／または縮小して前記注釈画像が段差のない領域に投影されるように調整する調整手段とを備えることを特徴とする。
【００２１】
請求項１４の制御プログラムは、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と通信網を介して接続されるコンピュータを、前記注釈画像を入力する入力手段、前記入力された注釈画像、前記対象物及び前記背景を表示する表示手段、前記測定装置で測定された距離のデータに基づいて、前記表示手段に表示される背景が占める領域に前記注釈画像が含まれるか否かを判別する判別手段、及び前記背景が占める領域に前記注釈画像が含まれる場合に、警告を行う警告手段として機能させることを特徴とする。
【００２２】
請求項１５の制御プログラムは、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と通信網を介して接続されるコンピュータを、前記注釈画像を入力する入力手段、前記測定装置で測定された距離のデータ及び前記入力手段で入力された注釈画像に基づいて、前記投影装置により前記注釈画像が前記対象物及び前記背景に段差のある状態で投影されるか否かを判別する判別手段、及び前記投影装置により前記注釈画像が前記対象物及び前記背景に段差のある状態で投影される場合に、警告を行う警告手段として機能させることを特徴とする。
【００２３】
請求項１６の制御プログラムは、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続されると共に、前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段を備える外部情報処理装置と通信網を介して接続されるコンピュータを、前記注釈画像を入力する入力手段、及び前記抽出された背景が占める領域を前記注釈画像の入力禁止領域として設定する設定手段として機能させることを特徴とする。
【００２４】
請求項１７の制御プログラムは、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と通信網を介して接続されるコンピュータを、前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段、前記注釈画像を入力する入力手段、及び前記抽出された背景が占める領域を前記注釈画像の入力禁止領域として設定する設定手段として機能させることを特徴とする。
【００２５】
請求項１８の制御プログラムは、対象物を撮影する撮影装置と、当該対象物及び背景を含む投影領域に注釈画像を投影する投影装置と、前記撮影装置から前記対象物及び前記背景までの距離を測定する測定装置とに接続される外部情報処理装置と接続されるコンピュータを、前記測定装置で測定された距離のデータに基づいて、前記撮影装置により撮影された撮影画像内で前記背景が占める領域を抽出する抽出手段、前記注釈画像を入力する入力手段、前記投影装置により前記注釈画像が投影される注釈画像投影領域に段差がある場合に、前記注釈画像を移動および／または縮小して前記注釈画像が段差のない領域に投影されるように調整する調整手段として機能させることを特徴とする。
【発明の効果】
【００２６】
請求項１、２、８、９、１０、１３、１４、１５、１８の発明によれば、投影領域側のユーザにとって見えにくい状態で投影される注釈画像の入力を減らすことができる。
【００２７】
請求項３の発明によれば、投影装置により注釈画像が対象物及び背景に段差のある状態で投影されることを精度良く判別することができる。
【００２８】
請求項４の発明によれば、第２情報処理装置のユーザは、注釈画像の送信するか否か又は当該注釈画像を修正するか否かを選択することができる。
【００２９】
請求項５、６、１１、１２、１６、１７の発明によれば、撮影画像内で背景が占める領域は注釈画像の入力禁止領域として設定されるので、投影領域側のユーザにとって見えにくい状態で投影される注釈画像の入力を減らすことができる。
【００３０】
請求項７の発明によれば、注釈画像の入力が禁止されていることを第２情報処理装置のユーザに知らせることができる。
【発明を実施するための最良の形態】
【００３１】
以下、本発明の実施の形態について、図面を参照して説明する。
【００３２】
（第１の実施の形態）
図１は、本発明の実施の形態に係る遠隔指示システムの構成を示すブロック図である。
【００３３】
図１の遠隔指示システムは、サーバとして機能するパーソナルコンピュータ（ＰＣ）１（第１情報処理装置、外部情報処理装置）、クライアントとして機能するＰＣ２（第２情報処理装置、情報処理装置）を備えており、これらは、ネットワーク３を介して互いに接続されている。ＰＣ１には、プロジェクタ４（投影装置）、ビデオカメラ５（撮像装置）及び三次元計測装置７（計測装置）が接続されている。プロジェクタ４は、ＰＣ１からの制御コマンドに基づいて、テーブル９上に載置された対象物８及びスクリーン１０に対して、ハーフミラー６を介して単なる光線を照射する又はアノテーション画像（注釈画像）等を投影する。尚、アノテーション画像は、線、文字、記号、図形、色、フォント（書体）等のあらゆる態様の画像を含む。
【００３４】
ビデオカメラ５は、対象物８を含むスクリーン１０の反射画像をハーフミラー６を介して撮影し、撮影画像をＰＣ１に出力する。
【００３５】
三次元計測装置７は、ビデオカメラ５のレンズ面から対象物８、テーブル９及びスクリーン１０までの距離を計測し、それぞれの距離データをＰＣ１に出力する。より具体的には、ビデオカメラ５で撮影される撮影画像が図２に示すような場合において、三次元計測装置７は、ビデオカメラ５から撮影領域内の点（撮影画像の各座標上の点（ｘ、ｙ））までの距離ｄ（ｘ、ｙ）を全て計測する。尚、撮影画像は表示部２０５の表示領域１２に表示されるため、撮影画像における座標（ｘ、ｙ）は、表示領域１２における座標（ｘ、ｙ）と一致する。
【００３６】
ＰＣ１は、ビデオカメラ５により撮影された撮影画像をネットワーク３を介してＰＣ２に出力する。ＰＣ２は、表示部２０５に接続されており、表示部２０５は、撮影画像の表示領域１２及びユーザインターフェース（ＵＩ）１４を表示する。尚、ＰＣ２は、表示部２０５を備える一体型のパーソナルコンピュータで構成してもよい。
【００３７】
ＵＩ１４は、ペン、テキスト、及び消去などのボタン群と、線種や色種のアイコンとを含む。表示領域１２には、ビデオカメラ５で撮影された撮影画像が表示される。図１においては、対象物８を含むスクリーン１０をビデオカメラ５により撮影した撮影画像が表示領域１２に表示されている。
【００３８】
例えば、ＵＩ１４のペンボタンが押下されて、表示領域１２内の対象物８上に図形等が記載されると、当該図形の情報はＰＣ２からＰＣ１を介してプロジェクタ４に出力される。プロジェクタ４は当該図形の情報に基づいて対象物８上に図形を描く。
【００３９】
また、ＰＣ２は、ＰＣ１に対して制御コマンドを出力し、プロジェクタ４及びビデオカメラ５の動作（例えば、ビデオカメラ５の撮影角度や撮影画像の明るさ、及びプロジェクタ４の投影画像の明るさなど）を制御することができる。
【００４０】
尚、同図においては、クライアントは、ＰＣ２の１台が記載されているが、遠隔指示システムは、複数のクライアント（ＰＣ）を備えていてもよい。
【００４１】
図３は、ＰＣ１〜２の機能構成を示すブロック図である。
【００４２】
ＰＣ１は、装置全体を制御すると共にプロジェクタ４、ビデオカメラ５及び三次元計測装置７の動作を制御する制御部１０１（抽出手段）と、ネットワーク３を介してＰＣ２と情報やデータの送受信を行う送受信部１０２と、制御プログラム、データ及び情報等を記憶する記憶部１０３と、プロジェクタ４、ビデオカメラ５及び三次元計測７と接続するためのインタフェース（ＩＦ）部１０４とを備えている。制御部１０１は、送受信部１０２、記憶部１０３、及びＩＦ部１０４に接続されており、さらにＩＦ部１０４を介してプロジェクタ４、ビデオカメラ５及び三次元計測装置７に接続されている。
【００４３】
ＰＣ２は、装置全体を制御する制御部２０１（判別手段、警告手段、取得手段、分割手段、抽出手段、設定手段）と、ネットワーク３を介してＰＣ１と情報やデータの送受信を行う送受信部２０２と、マウスやキーボードなどで構成される操作部２０３（入力手段）と、制御プログラム、データ及び情報等を記憶する記憶部２０４と、表示部２０５（表示手段、警告手段）とを備えている。制御部２０１は、送受信部２０２、操作部２０３、記憶部２０４及び表示部２０５に接続されている。
【００４４】
図４は、ＰＣ２のハードウエア構成を示すブロック図である。
【００４５】
ＰＣ２は、装置全体を制御するＣＰＵ２１、制御プログラムを備えるＲＯＭ２２、ワーキングエリアとして機能するＲＡＭ２３、各種の情報やプログラムを備えるハードディスクドライブ（ＨＤＤ）２４、マウス及びキーボード２５、他のコンピュータと接続するためのネットワークインタフェース２６、液晶モニタ又はＣＲＴで構成されるディスプレイ２７、及び不図示のＵＳＢ機器と接続するためのＵＳＢ（universal serial bus）インタフェース２８を備えている。ＣＰＵ２１はシステムバス２９を介してＲＯＭ２２、ＲＡＭ２３、ハードディスクドライブ（ＨＤＤ）２４、マウス及びキーボード２５、ネットワークインタフェース２６、ディスプレイ２７及びＵＳＢインタフェース２８に接続されている。
【００４６】
制御部２０１は、制御プログラムに従って各種の処理を実行するＣＰＵ２１に相当する。送受信部２０２は、ネットワークインタフェース２６に相当し、記憶部２０３は、ハードディスクドライブ（ＨＤＤ）２４に相当する。操作部２０４は、マウス及びキーボード２５に相当し、表示部３０５は、ディスプレイ２７に相当する。
【００４７】
ＰＣ１は、ＰＣ２の構成から、マウス及びキーボード２５、並びにディスプレイ２７を除外した構成であるが、マウス及びキーボード２５、並びにディスプレイ２７を備えていてもよい。尚、プロジェクタ４、ビデオカメラ５及び三次元計測装置７は、ＵＳＢインタフェースを介してＰＣ１に接続されている。
【００４８】
図５は、ＰＣ１及びＰＣ２で実行される処理を示すフローチャートである。
【００４９】
まず、ＰＣ１で実行される処理を説明する。
【００５０】
ＰＣ１の制御部１０１は、ビデオカメラ５から撮影画像を受信する（ステップＳ１）。この撮影画像は、例えば、０．５秒ごとにフレーム画像としてビデオカメラ５から送られ、記憶部１０３に記憶される。
【００５１】
制御部１０１は、撮影画像（フレーム画像）の差分をとり、対象物８又はビデオカメラ５の移動による撮影画像の変化があるか否かを判別する（ステップＳ２）。
【００５２】
ステップＳ２でＮＯの場合には、後述するステップＳ５に進む。一方、ステップＳ２でＹＥＳの場合には、三次元計測装置７が、ステレオ法又は光レーザー法等の公知の方法で三次元計測を実行する、即ちビデオカメラ５から撮影領域内の点（撮影画像の各座標上の点（ｘ、ｙ））までの距離ｄ（ｘ、ｙ）を全て計測する（ステップＳ３）。制御部１０１は、三次元計測装置７から距離データ（即ち、計測された全ての距離ｄ（ｘ、ｙ）のデータ）を受信し、ＰＣ２に送信する（ステップＳ４）。
【００５３】
その後、制御部１０１は、初期投射画像をプロジェクタ４に出力する（ステップＳ５）。初期投射画像とは、黒色の画像である。
【００５４】
次いで、制御部１０１は、ビデオカメラ５で撮影された撮影画像を送受信部１０２及びネットワーク３を介してＰＣ１に出力し（ステップＳ６）、ＰＣ２からのコマンドを受信するまで待つ（ステップＳ７）。ＰＣ２からのコマンドは、具体的には、アノテーション画像のデータであり、例えば、アノテーション画像が円の場合、円の中心と半径の長さをテキスト化した情報である。
【００５５】
次に、送受信部１０２がＰＣ２から描画コマンドを受信すると（ステップＳ８）、制御部１０１は、当該描画コマンドに従って画像の投影処理を実行する（ステップＳ９）。具体的には、ＰＣ２からアノテーション画像のデータを受信すると、制御部１０１は、当該アノテーション画像のデータをプロジェクタ４に出力する。プロジェクタ４はこのデータに基づいてアノテーション画像を投影する。
【００５６】
次に、制御部１０１は、ＰＣ２からのコマンドに従って実行する処理が全て終了したか否かを判別し（ステップＳ１０）、ステップＳ１０でＮＯの場合には、ステップＳ２に戻る。一方ステップＳ１０でＹＥＳの場合には、ＰＣ１の処理を終了する。
【００５７】
次に、ＰＣ２で実行される処理を説明する。
【００５８】
制御部２０１は、操作部２０４からコマンドの入力を受け付けると（ステップＳ１１）、操作部２０４からアノテーション画像を描画する画面処理コマンドを受信したか否かを判別する（ステップＳ１２）。
【００５９】
ステップＳ１２でＮＯの場合には、後述するステップＳ１８に進む。ステップＳ１２でＹＥＳの場合には、制御部２０１は、当該画面処理コマンドに従って、アノテーション画像を表示領域１２に描画する（ステップＳ１３）。
【００６０】
次いで、制御部２０１は、送受信部２０２を介してＰＣ１から受信した距離データ（距離ｄ（ｘ、ｙ）のデータ）と、表示領域１２に描画されたアノテーション画像とを照合して、表示領域１２に描画されたアノテーション画像を構成する各点に対する、距離データ（距離ｄ（ｘ、ｙ）のデータ）を取得する（ステップＳ１４）。
【００６１】
そして、制御部２０１は、当該取得された距離データに対して、公知のクラスタ解析を実行し、アノテーション画像を複数のクラスタに分割する（ステップＳ１５）。
【００６２】
次に、制御部２０１は、当該分割された一のクラスタに対応する、対象物８又はスクリーン１０からビデオカメラ５までの距離と、当該分割された他のクラスタに対応する、対象物８又はスクリーン１０からビデオカメラ５までの距離との差が所定の距離よりも小さいか否かを判別する（ステップＳ１６）。ここでは、アノテーション画像が対象物８及びスクリーン１０にまたがっており、対象物８からスクリーン１０への奥行き方向に段差がある状態でアノテーション画像が投影されるか否かを判断している。上記距離の差が所定の距離よりも小さい場合には、奥行き方向に段差がほとんどない状態でアノテーション画像が投影されるが、上記距離の差が所定の距離よりも大きい場合には、奥行き方向に段差がある状態でアノテーション画像が投影される。
【００６３】
例えば、アノテーション画像のうち対象物８上に投影される部分の距離（即ち、対象物８からビデオカメラ５までの距離）が「０．９０〜１．００」であり、上記クラスタ解析が実行された結果、対象物８上に投影される部分のアノテーション画像が、クラスタＡ（距離「０．９０〜０．９５」）と、クラスタＢ（距離「０．９６〜１．００」）とに分割されたとする。この場合、クラスタＡ、Ｂの距離の差が所定の距離（例えば０．１とする）よりも小さいので、奥行き方向に段差がほとんどない状態でアノテーション画像が投影される。
【００６４】
一方、例えば、アノテーション画像のうち対象物８上に投影される部分の距離（即ち、対象物８からビデオカメラ５までの距離）が「１」で、スクリーン１０上に投影される部分の距離（即ち、スクリーン１０からビデオカメラ５までの処理）が「２」である場合、上記クラスタ解析が実行された結果、アノテーション画像は対象物８上に投影される部分のクラスタＣ（距離「１」）と、スクリーン１０上に投影される部分のクラスタＤ（距離「２」）とに分割されたとする。この場合、クラスタＣ、Ｄの距離の差が所定の距離（例えば０．１とする）よりも大きいので、奥行き方向に段差がある状態でアノテーション画像が投影される。
【００６５】
また、ステップＳ１４〜Ｓ１６の処理により、制御部２０１は、三次元測定装置７で測定された距離のデータに基づいて、表示部２０５に表示されるスクリーン１０（背景）が占める領域にアノテーション画像が含まれるか否かを判別する。
【００６６】
ステップＳ１６でＹＥＳの場合には、制御部２０１は、アノテーション画像を描画コマンドとして送受信部２０２を介してＰＣ１に送信する（ステップＳ１７）。尚、ＰＣ１に送信された描画コマンドは、上記ステップＳ８の処理で、送受信部１０２により受信される。
【００６７】
制御部２０１は、ＰＣ２で実行すべき処理が全て終了したか否かを判別し（ステップＳ１８）、ステップＳ１８でＮＯの場合には、ステップＳ１１に戻る。一方ステップＳ１８でＹＥＳの場合には、ＰＣ２の処理を終了する。
【００６８】
ステップＳ１６でＮＯの場合には、制御部２０１は、表示部２０５の表示領域１２に、図６（Ａ）に示す警告ダイアログを表示させる（ステップＳ１９）。図６（Ａ）の警告ダイアログの「送信する」ボタンが押下された場合には、ステップＳ１７に進み、「送信しない」ボタンが押下された場合には、ステップＳ１８に進む。尚、ステップＳ１９で表示される警告ダイアログは、図６（Ｂ）のように、アノテーション画像を修正を勧めると共にアノテーション画像を修正するか否かの応答を求めるダイアログでもよい。
【００６９】
以上詳細に説明したように、本実施の形態によれば、制御部２０１が、三次元測定装置７で測定された距離のデータに基づいて、表示部２０５に表示される背景が占める領域にアノテーション画像が含まれるか否かを判別し、当該背景が占める領域にアノテーション画像が含まれる場合に、表示部２０５に警告ダイアログを表示させるので、投影領域側のユーザにとって見えにくい状態で投影されるアノテーション画像の入力を減らすことができる。
【００７０】
また、制御部２０１は、三次元測定装置７で測定された距離のデータ及び操作部２０４を介して入力されたアノテーション画像に基づいて、プロジェクタ４によりアノテーション画像が対象物８及びスクリーン１０に段差のある状態で投影されるか否かを判別し、アノテーション画像が対象物８及びスクリーン１０に段差のある状態で投影される場合には、表示部２０５に警告ダイアログを表示させるので、投影領域側のユーザにとって見えにくい状態で投影されるアノテーション画像の入力を減らすことができる。
【００７１】
さらに、制御部２０１は、入力されたアノテーション画像を構成する各点に対する、三次元測定装置７で測定された距離のデータを取得し、当該取得された距離のデータに対して、クラスタ解析を実行し、当該アノテーション画像を複数のクラスタに分割する。制御部２０１は、当該分割された一のクラスタに対応する、三次元測定装置７で測定された距離と、当該分割された他のクラスタに対応する、三次元測定装置７で測定された距離との差が所定の距離よりも大きい場合に、プロジェクタ４によりアノテーション画像が対象物８及びスクリーン１０に段差のある状態で投影されると判断する。
【００７２】
よって、プロジェクタ４によりアノテーション画像が対象物８及びスクリーン１０に段差のある状態で投影されることを精度良く判断することができる。
【００７３】
さらにまた、制御部２０１は、表示部２０５を介してアノテーション画像をプロジェクタ４に送信するか否かの応答又は当該アノテーション画像を修正するか否かの応答を求める。よって、ＰＣ２のユーザは、アノテーション画像をプロジェクタ４に送信するか否か又は当該アノテーション画像を修正するか否かを選択することができる。
【００７４】
上記実施の形態では、背景が占める領域にアノテーション画像が含まれる場合に、表示部２０５に警告ダイアログを表示させているが、例えばアノテーション画像が背景と対象物とにまたがっている場合、又はアノテーション画像が対象物内にあり且つ当該対象物内にある大きな段差をまたぐ場合に、図１０に示すように、制御部２０１は、アノテーション画像が段差の少ない領域に投影されるように、アノテーション画像を移動又は縮小するようにしてもよい。これにより、投影領域側のユーザにとって見えにくい状態で投影されるアノテーション画像の入力を減らすことができる。
【００７５】
この場合、制御部２０１は、アノテーション画像を一時的に移動又は縮小し、移動又は縮小後のアノテーション画像を構成する各点に対する、距離データに対して公知のクラスタ解析を実行し、アノテーション画像を複数のクラスタに分割する。その後、制御部２０１は、ステップＳ１６と同様の処理を実行し、ステップＳ１６でＮＯとなる場合には、更にアノテーション画像を一時的に移動又は縮小し、公知のクラスタ解析を実行するという上記処理をステップＳ１６でＹＥＳとなるまで繰り返す。ステップＳ１６でＹＥＳとなる場合には、制御部２０１は、移動又は縮小後のアノテーション画像を描画コマンドとして送受信部２０２を介してＰＣ１に送信する。これにより、アノテーション画像は段差の少ない領域に投影される。このように、制御部２０１はアノテーション画像を移動および／または縮小してアノテーション画像が段差のない領域に投影されるように調整することができる。
【００７６】
（第２の実施の形態）
以下、本発明の第２の実施の形態について、図面を参照して説明する。
【００７７】
上記第１の実施の形態では、制御部２０１が対象物８からスクリーン１０への奥行き方向に段差がある状態でアノテーション画像が投影されると判別した場合に、警告が行われ、投影領域側のユーザにとって見えにくい状態で投影されるアノテーション画像の入力を減らしていた。本実施の形態では、スクリーン１０の領域、即ち、背景の領域へのアノテーション画像の入力を予め禁止することにより、投影領域側のユーザにとって見えにくい状態で投影されるアノテーション画像の入力を減らす。
【００７８】
尚、本実施の形態に係る遠隔指示システムの構成は、上述した第１の実施の形態に係る遠隔指示システムの構成と同一であるので、その説明は省略する。
【００７９】
図７は、表示部２０５の表示領域１２の表示例を示す図である。
【００８０】
同図に示すように、ＰＣ２のユーザが、操作部２０４を介して、スクリーン１０の領域、即ち、背景の領域へのアノテーション画像の入力を試みると、バツ印のアイコン４０が表示され、アノテーション画像の入力が禁止される。一方、ＰＣ２のユーザが、操作部２０４を介して、対象物８の領域へのアノテーション画像の入力を試みると、十字印のアイコン４１が表示され、アノテーション画像の入力が実行される。尚、テーブル９に対するアノテーション画像の入力は、禁止されていないが、後述する制御部２０１の設定により禁止することも可能である。
【００８１】
図８は、ＰＣ１及びＰＣ２で実行される処理を示すフローチャートである。上記図５のフローチャートと同一の処理には、同一のステップ番号を付し、その説明を省略する。
【００８２】
まず、ステップＳ３の処理後、制御部１０１は、三次元計測装置７から距離データ（即ち、計測された全ての距離ｄ（ｘ、ｙ）のデータ）を受信し、当該距離データに対してＫ−平均法等のデータ解析を実行し、撮影画像からスクリーン１０の領域、即ち、背景の領域を抽出する（ステップＳ３１）。尚、抽出された背景の領域のデータは、撮影画像における座標（ｘ、ｙ）のデータの集合体である。
【００８３】
次いで、制御部１０１は、抽出された背景の領域のデータを送受信部１０２を介してＰＣ２に送信し（ステップＳ３２）、ステップＳ５に進む。
【００８４】
ＰＣ２の制御部２０１は、操作部２０４からコマンドの入力を受け付ける（ステップＳ１１）。次いで、制御部２０１は、ＰＣ１から背景の領域のデータを受信し、当該背景の領域のデータに基づいて、背景の領域をアノテーション画像の入力禁止領域として設定する（ステップＳ３３）。その後、ステップＳ１２の処理に進む。その他の処理は、図５の処理と同様である。
【００８５】
尚、図８では、制御部２０１は、図５のステップＳ１４〜Ｓ１６、Ｓ１９の処理を実行しない。
【００８６】
図９は、図８のＰＣ１及びＰＣ２で実行される処理の変形例を示すフローチャートである。上記図５のフローチャートと同一の処理には、同一のステップ番号を付し、その説明を省略する。
【００８７】
図９では、図８と異なり、ＰＣ２の制御部２０１がステップＳ３１の背景の領域の抽出処理を実行する。
【００８８】
具体的には、ＰＣ１の制御部１０１は、三次元計測装置７から距離データ（即ち、計測された全ての距離ｄ（ｘ、ｙ）のデータ）を受信し、ＰＣ２に送信する（ステップＳ４）。
【００８９】
ＰＣ２の制御部２０１は、三次元計測装置７から距離データ（即ち、計測された全ての距離ｄ（ｘ、ｙ）のデータ）をＰＣ１を介して受信し、当該距離データに対してＫ−平均法等のデータ解析を実行し、撮影画像からスクリーン１０の領域、即ち、背景の領域を抽出する（ステップＳ３１）。尚、抽出された背景の領域のデータは、撮影画像における座標（ｘ、ｙ）のデータの集合体である。
【００９０】
次いで、制御部２０１は、当該背景の領域のデータに基づいて、背景の領域をアノテーション画像の入力禁止領域として設定し（ステップＳ３３）、ステップＳ１２の処理に進む。その他の処理は、図８の処理と同様である。
【００９１】
以上詳細に説明したように、本実施の形態によれば、ＰＣ１の制御部１０１又はＰＣ２の制御部２０１が、三次元計測装置７で測定された距離のデータに基づいて、撮影画像内で背景が占める領域を抽出し、ＰＣ２の制御部２０１が抽出された背景が占める領域をアノテーション画像の入力禁止領域として設定する。よって、投影領域側のユーザにとって見えにくい状態で投影される注釈画像の入力を減らすことができる。
【００９２】
また、背景の領域へのアノテーション画像の入力を試みると、バツ印のアイコン４０が表示されるので、アノテーション画像の入力が禁止されていることをＰＣ２のユーザに知らせることができる。
【００９３】
ＰＣ１〜ＰＣ２の機能を実現するためのソフトウェアのプログラムが記録されている記録媒体を、各ＰＣに供給し、各ＰＣのＣＰＵが記憶媒体に格納されたプログラムを読み出し実行することによっても、上記実施の形態と同様の効果を奏する。プログラムを供給するための記憶媒体としては、例えば、ＣＤ−ＲＯＭ、ＤＶＤ、又はＳＤカードなどがある。
【００９４】
また、各ＰＣのＣＰＵが、各ＰＣの機能を実現するためのソフトウェアのプログラムを実行することによっても、上記実施の形態と同様の効果を奏する。
【００９５】
なお、本発明は、上述した実施の形態に限定されるものではなく、その要旨を逸脱しない範囲内で種々変形して実施することが可能である。
【図面の簡単な説明】
【００９６】
【図１】本発明の第１の実施の形態に係る遠隔指示システムの構成を示すブロック図である。
【図２】撮影画像と当該撮影画像の座標との関係を示す図である
【図３】ＰＣ１〜２の機能構成を示すブロック図である。
【図４】ＰＣ２のハードウエア構成を示すブロック図である。
【図５】ＰＣ１及びＰＣ２で実行される処理を示すフローチャートである。
【図６】（Ａ）は警告ダイアログの一例を示す図であり、（Ｂ）は警告ダイアログの他の例を示す図である。
【図７】第２の実施の形態に係る表示部２０５の表示領域１２の表示例を示す図である。
【図８】ＰＣ１及びＰＣ２で実行される処理を示すフローチャートである。
【図９】図８のＰＣ１及びＰＣ２で実行される処理の変形例を示すフローチャートである。
【図１０】アノテーション画像を移動又は縮小させた状態を示す図である。
【符号の説明】
【００９７】
１  ＰＣ（第１情報処理装置）
２  ＰＣ（第２情報処理装置）
３  ネットワーク
４  プロジェクタ（投影装置）
５  ビデオカメラ（撮像装置）
６  ハーフミラー
７  三次元測定装置（測定装置）
１０１  制御部（抽出手段）
１０２  送受信部
１０３  記憶部
１０４  ＩＦ部
１０５  表示部
２０１  制御部（判別手段、警告手段、取得手段、分割手段、抽出手段、設定手段）
２０２  送受信部
２０３  操作部（入力手段）
２０４  記憶部
２０５  表示部（警告手段、表示手段）
【図１】
2008271156.tif 000003
【図２】
2008271156.tif 000004
【図３】
2008271156.tif 000005
【図４】
2008271156.tif 000006
【図５】
2008271156.tif 000007
【図６】
2008271156.tif 000008
【図７】
2008271156.tif 000009
【図８】
2008271156.tif 000010
【図９】
2008271156.tif 000011
【図１０】
2008271156.tif 000012