(57)【要約】【課題】共通の電子文書の同一画面を表示させ、同時編集可能な投影型表示装置を提供する。【解決手段】書き込み画像を重複して形成可能な表示手段（１）と、表示手段（１）に形成された書き込み画像を撮影する撮像手段（３）と、表示手段（１）に画像データを投影する投影手段（２）と、撮像手段（３）により撮影した書き込み画像の投影位置、及び、大きさを調整し、表示手段（１）に表示する電子文書に貼り付ける情報処理手段（４）と、撮像手段（３）から得られる撮影画像を、ネットワークを介して接続された外部の投影型表示装置に送信する手段と、外部の投影型表示装置から受信した撮影画像を、所定の透明度の撮影画像として、表示手段（１）に表示する表示画像に対して重ねて表示する手段と、を具備する投影型表示装置を構成する。【選択図】        図１
2005051446.tif 000002
【特許請求の範囲】
【請求項１】
電子文書が表示されている表示画像に対し、書き込み画像を重複して形成可能な表示手段と、
前記表示手段に形成された書き込み画像を光学的に撮影し、該撮影した書き込み画像を電子データに変換する撮像手段と、
前記撮像手段により撮影した前記書き込み画像の投影位置、及び、大きさを、前記表示手段に表示する電子文書の表示画像に合わせて調整し、該調整した書き込み画像を、前記表示手段に表示する電子文書に貼り付ける情報処理手段と、
を有する投影型表示装置であって、
前記撮像手段から得られる撮影画像を、ネットワークを介して接続された外部の前記投影型表示装置に送信する手段と、
前記外部の投影型表示装置から受信した撮影画像を、所定の透明度の撮影画像として、前記表示手段に表示される電子文書の表示画像に対して重ねて表示する手段と、
を有することを特徴する投影型表示装置。
【請求項２】
前記撮像手段から得られる書き込み画像を、ネットワークを介して接続された外部の前記投影型表示装置に送信する書き込み画像送信手段を更に有し、
前記情報処理手段は、前記外部の投影型表示装置から受信した書き込み画像を、前記表示手段に表示する電子文書に貼り付ける手段を更に有することを特徴とする請求項１記載の投影型表示装置。
【請求項３】
ネットワークを介して接続された外部の前記投影型表示装置と共通の電子文書を前記表示手段に同時に表示する共通電子文書表示手段を更に有し、
前記情報処理手段は、前記外部の投影型表示装置から受信した書き込み画像の投影位置、及び、大きさを、前記表示手段に表示する電子文書の表示画像に対して調整し、該調整した書き込み画像を、前記表示手段に表示する電子文書に貼り付けることを特徴とする請求項２記載の投影型表示装置。
【請求項４】
電子文書が表示されている表示画像に対し、書き込み画像を重複して形成可能な表示手段と、
前記表示手段に形成される書き込み画像の座標を計測する計測手段と、
前記計測手段により計測された書き込み画像の座標データを画像データに変換し、該変換した書き込み画像の投影位置、及び、大きさを、前記表示手段に表示する電子文書の表示画像に合わせて調整し、該調整した書き込み画像を、前記表示手段に表示する電子文書に貼り付ける情報処理手段と、
を有する投影型表示装置であって、
前記計測手段から得られる座標データ、または、前記座標データの時系列変化を表すベクトルデータ、もしくは、前記ベクトルデータを画像として表現した画像データの３つのうち少なくともいずれかのデータを、ネットワークを介して接続された外部の前記投影型表示装置に送信する手段と、
前記外部の投影型表示装置から受信した前記３つのうち少なくともいずれかのデータを、時系列変化する画像列、もしくは、映像データに変換して、前記表示手段に表示する電子文書の表示画像に対して、所定の透明度の画像として、重ねて表示する手段と、
前記外部の投影型表示装置から受信した前記３つのうち少なくともいずれかのデータを、画像または描画オブジェクトとして、前記表示手段に表示する電子文書に貼り付ける手段と、
を有することを特徴とする投影型表示装置。
【請求項５】
前記情報処理手段は、
前記表示手段に表示する表示画像の一部または全部を、ネットワークを介して接続される外部の前記投影型表示装置に送信する画面共有送信手段と、
前記外部の投影型表示装置から受信した前記表示画像の一部または全部を前記表示手段に表示する画面共有受信手段と、を有し、ネットワークを介して接続される外部の投影型表示装置と共通の表示画像を前記表示手段に表示することを特徴とする請求項３または４記載の投影型表示装置。
【請求項６】
前記表示手段の同一領域を照明する２つの投影手段を有して構成され、
前記情報処理手段は、
前記２つの投影手段に対して、別々の映像信号を送信し、
かつ、前記表示手段に表示する表示画像の一部または全部を、ネットワークを介して接続される外部の前記投影型表示装置に送信する画面共有送信手段と、
前記外部の投影型表示装置から受信した表示画面を前記表示手段に表示する画面共有受信手段と、を有し、ネットワークを介して接続される外部の投影型表示装置と共通の表示画像を前記表示手段に表示することを特徴とする請求項３または４記載の投影型表示装置。
【請求項７】
前記２つの投影手段のうち、一方の投影手段は、他方の投影手段により前記表示手段に投影している画面データと同一の画面データを複製して仮想表示する仮想表示手段であることを特徴とする請求項６記載の投影型表示装置。
【請求項８】
前記投影手段と、前記撮像手段または前記計測手段と、は前記表示手段に対して同じ側の面に設けられており、前記表示手段に対して、前記投影手段と、前記撮像手段または前記計測手段と、が設けられている側とは反対側の面に対して、前記書き込み画像を形成可能とすることを特徴とする請求項１から７の何れか１項に記載の投影型表示装置。
【請求項９】
請求項５記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、
サーバとして機能する１台の前記投影型書表示装置は、
サーバとして機能する投影型書表示装置自身が起動しているアプリケーションにより前記表示手段に表示する電子文書の表示画像に対して、クライアントとして機能する１台の前記投影型表示装置の撮像手段からネットワークを介して受信した表示画像を、前記表示手段に表示する電子文書の表示画像に対して、所定の透明度において、重ねて表示し、且つ、その表示画像を、前記画面共有送信手段により、クライアント側の投影型表示装置に送信し、
クライアントとして機能する投影型表示装置は、
サーバとして機能する投影型表示装置から受信した表示画像を、前記画面共有受信手段により前記表示手段に表示すると共に、前記表示手段に表示した表示画像に、サーバとして機能する投影型表示装置から受信した表示画像を、所定の透明度において、重ねて表示することを特徴とする投影型表示装置を用いた表示画像の遠隔共有方法。
【請求項１０】
請求項５記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、
サーバとして機能する１台の前記投影型表示装置は、
サーバとして機能する投影型書表示装置自身が起動しているアプリケーションにより前記表示手段に表示する電子文書の表示画像に対して、クライアントとして機能する少なくとも１台以上の、前記投影型表示装置の撮像手段からネットワークを介して受信した表示画像と、サーバとして機能する投影型書表示装置自身の撮像手段からの表示画像を、前記表示手段に表示する電子文書の表示画像に対して、所定の透明度において、重ねて表示し、且つ、その表示画像を、前記画面共有送信手段により、クライアント側の投影型書表示装置に送信し、
クライアントとして機能する投影型表示装置は、
サーバとして機能する投影型表示装置から受信した表示画像を、前記画面共有受信手段により前記表示手段に表示することを特徴とする投影型表示装置を用いた表示画像の遠隔共有方法。
【請求項１１】
請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、
サーバとして機能する１台の投影型表示装置は、
第１の投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより前記表示手段に表示する電子文書の表示画像を投影すると共に、前記表示手段に表示する表示画像を、前記画面共有送信手段により、クライアント側の投影型表示装置に送信し、
第２の投影手段では、クライアントとして機能する少なくとも１台以上の、前記投影型表示装置の撮像手段からネットワークを介して受信した表示画像を前記表示手段に投影し、
クライアントとして機能する投影型表示装置は、
第１の投影手段では、サーバとして機能する投影型表示装置から受信した表示画像を、前記画面共有受信手段を用いて前記表示手段に投影し、
第２の投影手段では、サーバ側の投影型表示装置から受信した表示画像を前記表示手段に投影することを特徴とする投影型表示装置を用いた表示画像の遠隔共有方法。
【請求項１２】
請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、
サーバとして機能する１台の投影型表示装置は、
第１の投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより前記表示手段に表示している電子文書の表示画像を前記表示手段に投影すると共に、その表示画像を、前記画面共有送信手段により、クライアント側の投影型表示装置に送信し、
第２の投影手段では、クライアントとして機能する１台の、前記投影型表示装置の撮像手段からネットワークを介して受信した表示画像を前記表示手段に投影し、
一方、１台のサーバとして機能する投影型表示装置に対して、１台まで接続可能であるクライアント側の投影型表示装置は、
サーバとして機能する投影型表示装置から受信した表示画像を前記画面共有受信手段により表示手段に表示すると共に、前記表示手段に表示した表示画像に、サーバ側の投影型書表示装置から受信した表示画像を、所定の透明度において、重ねて表示することを特徴とする投影型表示装置を用いた表示画像の遠隔共有方法。
【請求項１３】
請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、
サーバとして機能する１台の投影型表示装置は、
第１の投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより前記表示手段に表示している電子文書の表示画像に対し、サーバとして機能する投影型表示装置自身の撮像手段からの表示画像を、所定の透明度において、重ねて表示し、該重ねて表示した表示画像を、前記画面共有送信手段により、クライアント側の投影型表示装置に送信し、
第２の投影手段では、クライアントとして機能する１台の、前記投影型書表示装置の撮像手段からネットワークを介して受信した表示画像を前記表示手段に投影し、
一方、１台のサーバとして機能する投影型表示装置に対して、１台まで接続可能であるクライアント側の投影型表示装置は、
サーバとして機能する投影型表示装置から受信した表示画像を前記画面共有受信手段により前記表示手段に表示することを特徴とする投影型表示装置を用いた表示画像の遠隔共有方法。
【請求項１４】
請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、
サーバとして機能する１台の投影型表示装置は、
投影手段と、仮想表示手段の計２つの投影手段を有し、それぞれ別々の映像信号を送信し、
前記投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより前記表示手段に表示している電子文書の表示画像に対して、クライアントとして機能する１台の前記投影型表示装置の撮像手段からネットワークを介して受信した表示画像を、所定の透明度において、重ねて表示している表示画像を前記表示手段に投影し、
一方、仮想表示手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより前記表示手段に表示している電子文書の表示画像の複製データを生成し、その画像データに対して、サーバとして機能する投影型表示装置自身の撮像手段から得られた表示画像を、前記仮想表示手段で仮想的に表示している電子文書の表示画像に対して、所定の透明度において、重ねて仮想表示し、その仮想画面を、前記画面共有送信手段により、クライアント側の投影型表示装置に送信し、
一方、１台のサーバとして機能する投影型表示装置に対して、１台まで接続可能であるクライアント側の投影型表示装置は、
サーバとして機能する投影型表示装置から受信した表示画像を前記画面共有受信手段により前記表示手段に表示することを特徴とする投影型表示装置を用いた表示画像の遠隔共有方法。
【請求項１５】
請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、
サーバとして機能する１台の投影型表示装置は、
投影手段と、仮想表示手段の計２つの投影手段を有し、
前記仮想表示手段には、前記投影手段により前記表示手段に投影している画像と同一の画像データを複製して仮想表示し、
前記投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより前記表示手段に表示している電子文書の表示画像に対して、クライアントとして機能する少なくとも１台以上の前記投影型表示装置の撮像手段からネットワークを介して受信した表示画像を、所定の透明度において、重ねて表示している表示画像を前記表示手段に投影し、
一方、仮想表示手段では、前記投影手段により前記表示手段に表示している表示画像と同一の表示画像を前記表示手段に仮想表示し、該仮想表示画像を、前記画面共有受信手段により、クライアント側の投影型表示装置に送信し、
一方、１台のサーバとして機能する投影型表示装置に対して、少なくとも１台以上接続可能であるクライアント側の投影型表示装置は、
サーバとして機能する投影型表示装置から受信した表示画像を前記画面共有受信手段により前記表示手段に表示することを特徴とする投影型表示装置を用いた表示画像の遠隔共有方法。
【請求項１６】
請求項５記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、
サーバとして機能する１台の前記投影型表示装置は、
サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより前記表示手段に表示している電子文書の表示画像に対して、クライアントとして機能する少なくとも１台以上の、前記投影型表示装置の撮像手段からネットワークを介して受信した前記３つのうちいずれかのデータ、及び、サーバとして機能する投影型表示装置自身の前記計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して、前記表示手段に表示している電子文書の表示画像に対して、所定の透明度において、重ねて表示し、且つ、その表示画像を、前記画面共有送信手段により、クライアント側の投影型表示装置に送し、
一方、クライアント側の投影型表示装置は、
サーバとして機能する投影型表示装置から受信した表示画像を、前記画面共有受信手段により前記表示手段に表示することを特徴とする投影型表示装置を用いた表示画像の遠隔共有方法。
【請求項１７】
請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、
サーバとして機能する１台の投影型表示装置は、
第１の投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより前記表示手段に表示している電子文書の表示画像を前記表示手段に投影すると共に、その表示画像を、前記画面共有送信手段により、クライアント側の投影型表示装置に送信し、
第２の投影手段では、クライアントとして機能する１台の、前記投影型表示装置の撮像手段からネットワークを介して受信した前記３つのうちいずれかのデータ、及び、サーバとして機能する投影型表示装置自身の前記計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して前記表示手段に投影し、
一方、クライアント側の投影型表示装置は、
第１の投影手段では、サーバとして機能する投影型表示装置から受信した表示画像を、前記画面共有受信手段により前記表示手段に投影し、
第２の投影手段では、サーバとして機能する投影型表示装置から受信した前記３つのうちいずれかのデータ、及び、サーバとして機能する投影型表示装置自身の前記計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して前記表示手段に投影することを特徴とする投影型表示装置を用いた表示画像の遠隔共有方法。
【請求項１８】
請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、
サーバとして機能する１台の投影型表示装置は、
第１の投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより前記表示手段に表示している電子文書の表示画像を前記表示手段に投影すると共に、その表示画像を、前記画面共有送信手段により、クライアント側の投影型表示装置に送信し、
第２の投影手段では、クライアントとして機能する１台の、前記投影型表示装置の撮像手段からネットワークを介して受信した前記３つのうちいずれかのデータ、及び、サーバとして機能する投影型表示装置自身の前記計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して前記表示手段に投影し、
一方、クライアントとして機能する投影型表示装置は、
サーバとして機能する投影型表示装置から受信した表示画像を、前記画面共有受信手段により前記表示手段に表示すると共に、サーバとして機能する投影型表示装置から受信した前記３つのうちいずれかのデータ、及びサーバとして機能する投影型表示装置自身の前記計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して、所定の透明度において、重ねて表示することを特徴とする投影型表示装置を用いた表示画像の遠隔共有方法。
【請求項１９】
請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、
サーバとして機能する１台の投影型表示装置は、
前記投影手段と、仮想表示手段と、の計２つの投影手段を有し、それぞれ別々の映像信号を送信し、
前記投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより前記表示手段に表示している電子文書の表示画像に対し、クライアントとして機能する１台の投影型表示装置からネットワークを介して受信した前記３つのうちいずれかのデータ、及びサーバとして機能する投影型表示装置自身の前記計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して、前記表示手段に表示している電子文書の表示画像に対して、所定の透明度において、重ねて表示し投影し、
一方、仮想表示手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより前記表示手段に表示している電子文書の表示画像の複製データを生成し、その画像データに対して、サーバとして機能する投影型表示装置自身の前記計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して、前記仮想表示手段で仮想的に表示している電子文書の表示画像に対して、所定の透明度において、重ねて仮想表示し、その仮想画面を、前記画面共有送信手段により、クライアント側の投影型表示装置に送信し、
一方、クライアントとして機能する投影型表示装置は、
サーバとして機能する投影型表示装置から受信した表示画像を、前記画面共有受信手段を用いて前記表示手段に表示すると共に、サーバとして機能する投影型表示装置から受信した前記３つのうちいずれかのデータ、及び、サーバとして機能する投影型表示装置自身の前記計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して、所定の透明度において、重ねて表示することを特徴とする投影型表示装置を用いた表示画像の遠隔共有方法。
【請求項２０】
請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、
サーバとして機能する１台の投影型表示装置は、
前記投影手段と、仮想表示手段と、の計２つの投影手段を有し、
前記仮想表示手段には、前記投影手段で投影している画像と同一の画像データを複製して仮想表示し、
前記投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより前記表示手段に表示している電子文書の表示画像に対し、クライアントとして機能する少なくとも１台以上の投影型表示装置から、ネットワークを介して受信した前記３つのうちいずれかのデータ、及び、サーバとして機能する投影型表示装置自身の前記計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して、前記表示手段に表示している電子文書の表示画像に対して、所定の透明度において、重ねて表示し、且つ、その表示画像を、前記画面共有送信手段により、クライアント側の投影型表示装置に送信し、
一方、仮想表示手段は、前記投影手段により前記表示手段に表示している表示画像と同一の表示画像を仮想表示し、該仮想表示画像を、前記画面共有送信手段により、クライアント側の投影型表示装置に送信し、
１台のサーバとして機能する投影型表示装置に対して、少なくとも１台以上接続可能であるクライアント側の投影型表示装置は、
サーバとして機能する投影型表示装置から受信した表示画像を前記画面共有受信手段により前記表示手段に表示することを特徴とする投影型表示装置を用いた表示画像の遠隔共有方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、投影型表示装置及びコミュニケーションシステムに関し、特に、ネットワークを介して共通の表示画像を表示する投影型表示装置、投影型表示装置を用いた表示画像の遠隔共有方法に関する。
【０００２】
【従来の技術】
従来から、情報通信網を介して音声情報や画像情報等を相互に送受信させ、遠隔地にいる者同士が、物理的な距離を意識せずに、相互間の円滑な意志伝達を図るコミュニケーションシステムの開発がなされており、本発明より先に出願された技術文献として、手書き入力部と、所定の手順で新規の手書き入力を自動的に送信する送信部と、手書き入力と受信入力の表示用記憶部への入力を調整する入力制御部と、入力部から入力したデータは相手方装置へ送信が済むまでは、既に表示されているデータと方法を変えて表示させる手書きデータ表示制御部と、表示すべきデータを記憶する表示用記憶部と、そのデータを表示する表示部と、外部からデータを受信する受信部と、外部から受信した他形式のデータを自装置用の形式のデータに変換するイメージ展開部と、外部から受信したデータを点滅表示させる受信者注意喚起機能発揮部とを設け、文字、図形等からなるメッセージを自動的にボード上に表示し、また、各種通信装置と相互に通信し合うことにより、円滑な意志伝達が可能となる伝言型電子黒板装置がある（例えば、特許文献１参照）。
【０００３】
また、複数の端末に設けられた共有ホワイトボード装置と共有資料表示装置との間で画面上の画像データの交換を行う画面データ交換手段を設け、共有ホワイトボード装置と共有資料表示装置との間で画面上の画像データを操作性よく交換することで、実際の会議を操作性良く模擬できるようにする協同作業支援システムがある（例えば、特許文献２参照）。
【０００４】
また、複数の端末装置としての仮想会議端末が、通信回線を介して中央処理装置と接続されている状況において、その中央処理装置に複数の合成前白板が具備されていると共に、各仮想会議端末から書き込み対象とする合成前白板を選択可能としつつ、これらの合成前白板を任意の組み合わせで合成して表示できるようにした遠隔会議システムがある（例えば、特許文献３参照）。
【０００５】
また、画像投影面とユーザが書き込む書込み面とが同一画面上に配することで操作性が高められ、且つ安価な投影型表示装置がある（例えば、特許文献４参照）。
【０００６】
【特許文献１】
特開平６−２８４２４０号公報
【特許文献２】
特開平１０−５１５８１号公報
【特許文献３】
特開平１１−１４９２８２号公報
【特許文献４】
特開２００３−１４３３４８号公報
【０００７】
【発明が解決しようとする課題】
しかしながら、特許文献１と、特許文献２との発明は、手書き入力をＰＣの入力デバイスの座標にリアルタイムに変換することから、遠隔地からもリアルタイムに、文書に書き込みが行われてしまうことになる。また、文書の同一箇所を表示させる方法が煩雑であることや、遠隔地からの書き込みデータが、書き込むべき位置からずれてしまう虞もある。また、ある程度書き込んで、内容を確認した上で、書き込みデータを取り込み、文書に貼り付けたい場合もある。また、座標入力にタイムラグがあり、書き込み内容がスクリーン上に表示されるまでに時間がかかるので、常に、スクリーン上の表示内容を確認しながら手書き入力を行わなければならず、筆記速度を落とす必要があり、また書き損じも多くなる。また、１つの地点で、同時に複数の人が書き込むことが出来ない。
【０００８】
また、特許文献３の発明は、電子黒板のスクリーンを回転させて、書き込みデータを読み取るまでには時間が掛かり、より高速な書き込みデータの読み取りが望まれることになる。また、書き込みデータの読み取りを行うまでは、相手側が何を書き込んでいるのかわからない。また、スクリーン上に対しプロジェクタとユーザが同じ側にある構成だと、書き込み動作時に、ユーザの影がスクリーン上に表示されてしまう虞がある。
【０００９】
また、特許文献４の発明は、文書に次々と書き込みを行って、書き込んだ内容を取り込み、その取り込んだ書き込み画像を貼り付ける場合に、書き込んだ内容を取り込んで同期を取るまでの間、相手側が何をやっているのかを把握することができないことになる。また、文書の同一箇所をスクリーン上に表示させる方法が煩雑であることや、遠隔地からの書き込みデータが、書き込むべき位置からずれてしまう虞もある。また、一般に、同一の文書を複数のＰＣで同時に開いて、編集することが出来ない。なお、電子文書を各地点で複製して、ファイルを変更した後、同期を取り、ファイルの内容を一致させる方法も考えられるが、同期を取る毎にファイルを開き直さなければならないので、頻繁に更新出来ない問題があり、リアルタイム性が失われる。また、複数のＰＣでお互いに編集を行っていた場合、ファイルの同期を取ると、他方は編集中の内容が破棄されるという問題がある。
【００１０】
本発明は上記事情に鑑みてなされたものであり、共通の電子文書の同一画面を表示させ、同時編集可能な投影型表示装置を実現し、リアルタイムな表示画像を可能とする投影型表示装置および投影型表示装置を用いた表示画像の遠隔共有方法を提供することを目的とするものである。
【００１１】
【課題を解決するための手段】
かかる目的を達成するために本発明は以下のような特徴を有する。
【００１２】
請求項１記載の発明は、電子文書が表示されている表示画像に対し、書き込み画像を重複して形成可能な表示手段と、表示手段に形成された書き込み画像を光学的に撮影し、該撮影した書き込み画像を電子データに変換する撮像手段と、撮像手段により撮影した書き込み画像の投影位置、及び、大きさを、表示手段に表示する電子文書の表示画像に合わせて調整し、該調整した書き込み画像を、表示手段に表示する電子文書に貼り付ける情報処理手段と、を有する投影型表示装置であって、撮像手段から得られる撮影画像を、ネットワークを介して接続された外部の投影型表示装置に送信する手段と、外部の投影型表示装置から受信した撮影画像を、所定の透明度の撮影画像として、表示手段に表示される電子文書の表示画像に対して重ねて表示する手段と、を有することを特徴する。
【００１３】
請求項２記載の発明は、請求項１記載の投影型表示装置において、撮像手段から得られる書き込み画像を、ネットワークを介して接続された外部の投影型表示装置に送信する書き込み画像送信手段を更に有し、情報処理手段は、外部の投影型表示装置から受信した書き込み画像を、表示手段に表示する電子文書に貼り付ける手段を更に有することを特徴とする。
【００１４】
請求項３記載の発明は、請求項２記載の投影型表示装置において、ネットワークを介して接続された外部の投影型表示装置と共通の電子文書を表示手段に同時に表示する共通電子文書表示手段を更に有し、情報処理手段は、外部の投影型表示装置から受信した書き込み画像の投影位置、及び、大きさを、表示手段に表示する電子文書の表示画像に対して調整し、該調整した書き込み画像を、表示手段に表示する電子文書に貼り付けることを特徴とする。
【００１５】
請求項４記載の発明は、電子文書が表示されている表示画像に対し、書き込み画像を重複して形成可能な表示手段と、表示手段に形成される書き込み画像の座標を計測する計測手段と、計測手段により計測された書き込み画像の座標データを画像データに変換し、該変換した書き込み画像の投影位置、及び、大きさを、表示手段に表示する電子文書の表示画像に合わせて調整し、該調整した書き込み画像を、表示手段に表示する電子文書に貼り付ける情報処理手段と、を有する投影型表示装置であって、計測手段から得られる座標データ、または、座標データの時系列変化を表すベクトルデータ、もしくは、ベクトルデータを画像として表現した画像データの３つのうち少なくともいずれかのデータを、ネットワークを介して接続された外部の投影型表示装置に送信する手段と、外部の投影型表示装置から受信した３つのうち少なくともいずれかのデータを、時系列変化する画像列、もしくは、映像データに変換して、表示手段に表示する電子文書の表示画像に対して、所定の透明度の画像として、重ねて表示する手段と、外部の投影型表示装置から受信した３つのうち少なくともいずれかのデータを、画像または描画オブジェクトとして、表示手段に表示する電子文書に貼り付ける手段と、を有することを特徴とする。
【００１６】
請求項５記載の発明は、請求項３または４記載の投影型表示装置において、情報処理手段は、表示手段に表示する表示画像の一部または全部を、ネットワークを介して接続される外部の投影型表示装置に送信する画面共有送信手段と、外部の投影型表示装置から受信した表示画像の一部または全部を表示手段に表示する画面共有受信手段と、を有し、ネットワークを介して接続される外部の投影型表示装置と共通の表示画像を表示手段に表示することを特徴とする。
【００１７】
請求項６記載の発明は、請求項３または４記載の投影型表示装置において、表示手段の同一領域を照明する２つの投影手段を有して構成され、情報処理手段は、２つの投影手段に対して、別々の映像信号を送信し、かつ、表示手段に表示する表示画像の一部または全部を、ネットワークを介して接続される外部の投影型表示装置に送信する画面共有送信手段と、外部の投影型表示装置から受信した表示画面を表示手段に表示する画面共有受信手段と、を有し、ネットワークを介して接続される外部の投影型表示装置と共通の表示画像を表示手段に表示することを特徴とする。
【００１８】
請求項７記載の発明は、請求項６記載の投影型表示装置において、２つの投影手段のうち、一方の投影手段は、他方の投影手段により表示手段に投影している画面データと同一の画面データを複製して仮想表示する仮想表示手段であることを特徴とする。
【００１９】
請求項８記載の発明は、請求項１から７の何れか１項に記載の投影型表示装置において、投影手段と、撮像手段または計測手段と、は表示手段に対して同じ側の面に設けられており、表示手段に対して、投影手段と、撮像手段または計測手段と、が設けられている側とは反対側の面に対して、書き込み画像を形成可能とすることを特徴とする。
【００２０】
請求項９記載の発明は、請求項５記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、サーバとして機能する１台の投影型書表示装置は、サーバとして機能する投影型書表示装置自身が起動しているアプリケーションにより表示手段に表示する電子文書の表示画像に対して、クライアントとして機能する１台の投影型表示装置の撮像手段からネットワークを介して受信した表示画像を、表示手段に表示する電子文書の表示画像に対して、所定の透明度において、重ねて表示し、且つ、その表示画像を、画面共有送信手段により、クライアント側の投影型表示装置に送信し、クライアントとして機能する投影型表示装置は、サーバとして機能する投影型表示装置から受信した表示画像を、画面共有受信手段により表示手段に表示すると共に、表示手段に表示した表示画像に、サーバとして機能する投影型表示装置から受信した表示画像を、所定の透明度において、重ねて表示することを特徴とする。
【００２１】
請求項１０記載の発明は、請求項５記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、サーバとして機能する１台の投影型表示装置は、サーバとして機能する投影型書表示装置自身が起動しているアプリケーションにより表示手段に表示する電子文書の表示画像に対して、クライアントとして機能する少なくとも１台以上の、投影型表示装置の撮像手段からネットワークを介して受信した表示画像と、サーバとして機能する投影型書表示装置自身の撮像手段からの表示画像を、表示手段に表示する電子文書の表示画像に対して、所定の透明度において、重ねて表示し、且つ、その表示画像を、画面共有送信手段により、クライアント側の投影型書表示装置に送信し、クライアントとして機能する投影型表示装置は、サーバとして機能する投影型表示装置から受信した表示画像を、画面共有受信手段により表示手段に表示することを特徴とする。
【００２２】
請求項１１記載の発明は、請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、サーバとして機能する１台の投影型表示装置は、第１の投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより表示手段に表示する電子文書の表示画像を投影すると共に、表示手段に表示する表示画像を、画面共有送信手段により、クライアント側の投影型表示装置に送信し、第２の投影手段では、クライアントとして機能する少なくとも１台以上の、投影型表示装置の撮像手段からネットワークを介して受信した表示画像を表示手段に投影し、クライアントとして機能する投影型表示装置は、第１の投影手段では、サーバとして機能する投影型表示装置から受信した表示画像を、画面共有受信手段を用いて表示手段に投影し、第２の投影手段では、サーバ側の投影型表示装置から受信した表示画像を表示手段に投影することを特徴とする。
【００２３】
請求項１２記載の発明は、請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、サーバとして機能する１台の投影型表示装置は、第１の投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより表示手段に表示している電子文書の表示画像を表示手段に投影すると共に、その表示画像を、画面共有送信手段により、クライアント側の投影型表示装置に送信し、第２の投影手段では、クライアントとして機能する１台の、投影型表示装置の撮像手段からネットワークを介して受信した表示画像を表示手段に投影し、一方、１台のサーバとして機能する投影型表示装置に対して、１台まで接続可能であるクライアント側の投影型表示装置は、サーバとして機能する投影型表示装置から受信した表示画像を画面共有受信手段により表示手段に表示すると共に、表示手段に表示した表示画像に、サーバ側の投影型書表示装置から受信した表示画像を、所定の透明度において、重ねて表示することを特徴とする。
【００２４】
請求項１３記載の発明は、請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、サーバとして機能する１台の投影型表示装置は、第１の投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより表示手段に表示している電子文書の表示画像に対し、サーバとして機能する投影型表示装置自身の撮像手段からの表示画像を、所定の透明度において、重ねて表示し、該重ねて表示した表示画像を、画面共有送信手段により、クライアント側の投影型表示装置に送信し、第２の投影手段では、クライアントとして機能する１台の、投影型書表示装置の撮像手段からネットワークを介して受信した表示画像を表示手段に投影し、一方、１台のサーバとして機能する投影型表示装置に対して、１台まで接続可能であるクライアント側の投影型表示装置は、サーバとして機能する投影型表示装置から受信した表示画像を画面共有受信手段により表示手段に表示することを特徴とする。
【００２５】
請求項１４記載の発明は、請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、サーバとして機能する１台の投影型表示装置は、投影手段と、仮想表示手段の計２つの投影手段を有し、それぞれ別々の映像信号を送信し、投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより表示手段に表示している電子文書の表示画像に対して、クライアントとして機能する１台の投影型表示装置の撮像手段からネットワークを介して受信した表示画像を、所定の透明度において、重ねて表示している表示画像を表示手段に投影し、一方、仮想表示手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより表示手段に表示している電子文書の表示画像の複製データを生成し、その画像データに対して、サーバとして機能する投影型表示装置自身の撮像手段から得られた表示画像を、仮想表示手段で仮想的に表示している電子文書の表示画像に対して、所定の透明度において、重ねて仮想表示し、その仮想画面を、画面共有送信手段により、クライアント側の投影型表示装置に送信し、一方、１台のサーバとして機能する投影型表示装置に対して、１台まで接続可能であるクライアント側の投影型表示装置は、サーバとして機能する投影型表示装置から受信した表示画像を画面共有受信手段により表示手段に表示することを特徴とする。
【００２６】
請求項１５記載の発明は、請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、サーバとして機能する１台の投影型表示装置は、投影手段と、仮想表示手段の計２つの投影手段を有し、仮想表示手段には、投影手段により表示手段に投影している画像と同一の画像データを複製して仮想表示し、投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより表示手段に表示している電子文書の表示画像に対して、クライアントとして機能する少なくとも１台以上の投影型表示装置の撮像手段からネットワークを介して受信した表示画像を、所定の透明度において、重ねて表示している表示画像を表示手段に投影し、一方、仮想表示手段では、投影手段により表示手段に表示している表示画像と同一の表示画像を表示手段に仮想表示し、該仮想表示画像を、画面共有受信手段により、クライアント側の投影型表示装置に送信し、一方、１台のサーバとして機能する投影型表示装置に対して、少なくとも１台以上接続可能であるクライアント側の投影型表示装置は、サーバとして機能する投影型表示装置から受信した表示画像を画面共有受信手段により表示手段に表示することを特徴とする。
【００２７】
請求項１６記載の発明は、請求項５記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、サーバとして機能する１台の投影型表示装置は、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより表示手段に表示している電子文書の表示画像に対して、クライアントとして機能する少なくとも１台以上の、投影型表示装置の撮像手段からネットワークを介して受信した３つのうちいずれかのデータ、及び、サーバとして機能する投影型表示装置自身の計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して、表示手段に表示している電子文書の表示画像に対して、所定の透明度において、重ねて表示し、且つ、その表示画像を、画面共有送信手段により、クライアント側の投影型表示装置に送し、一方、クライアント側の投影型表示装置は、サーバとして機能する投影型表示装置から受信した表示画像を、画面共有受信手段により表示手段に表示することを特徴とする。
【００２８】
請求項１７記載の発明は、請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、サーバとして機能する１台の投影型表示装置は、第１の投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより表示手段に表示している電子文書の表示画像を表示手段に投影すると共に、その表示画像を、画面共有送信手段により、クライアント側の投影型表示装置に送信し、第２の投影手段では、クライアントとして機能する１台の、投影型表示装置の撮像手段からネットワークを介して受信した３つのうちいずれかのデータ、及び、サーバとして機能する投影型表示装置自身の計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して表示手段に投影し、一方、クライアント側の投影型表示装置は、第１の投影手段では、サーバとして機能する投影型表示装置から受信した表示画像を、画面共有受信手段により表示手段に投影し、第２の投影手段では、サーバとして機能する投影型表示装置から受信した３つのうちいずれかのデータ、及び、サーバとして機能する投影型表示装置自身の計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して表示手段に投影することを特徴とする。
【００２９】
請求項１８記載の発明は、請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、サーバとして機能する１台の投影型表示装置は、第１の投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより表示手段に表示している電子文書の表示画像を表示手段に投影すると共に、その表示画像を、画面共有送信手段により、クライアント側の投影型表示装置に送信し、第２の投影手段では、クライアントとして機能する１台の、投影型表示装置の撮像手段からネットワークを介して受信した３つのうちいずれかのデータ、及び、サーバとして機能する投影型表示装置自身の計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して表示手段に投影し、一方、クライアントとして機能する投影型表示装置は、サーバとして機能する投影型表示装置から受信した表示画像を、画面共有受信手段により表示手段に表示すると共に、サーバとして機能する投影型表示装置から受信した３つのうちいずれかのデータ、及びサーバとして機能する投影型表示装置自身の計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して、所定の透明度において、重ねて表示することを特徴とする。
【００３０】
請求項１９記載の発明は、請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、サーバとして機能する１台の投影型表示装置は、投影手段と、仮想表示手段と、の計２つの投影手段を有し、それぞれ別々の映像信号を送信し、投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより表示手段に表示している電子文書の表示画像に対し、クライアントとして機能する１台の投影型表示装置からネットワークを介して受信した３つのうちいずれかのデータ、及びサーバとして機能する投影型表示装置自身の計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して、表示手段に表示している電子文書の表示画像に対して、所定の透明度において、重ねて表示し投影し、一方、仮想表示手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより表示手段に表示している電子文書の表示画像の複製データを生成し、その画像データに対して、サーバとして機能する投影型表示装置自身の計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して、仮想表示手段で仮想的に表示している電子文書の表示画像に対して、所定の透明度において、重ねて仮想表示し、その仮想画面を、画面共有送信手段により、クライアント側の投影型表示装置に送信し、一方、クライアントとして機能する投影型表示装置は、サーバとして機能する投影型表示装置から受信した表示画像を、画面共有受信手段を用いて表示手段に表示すると共に、サーバとして機能する投影型表示装置から受信した３つのうちいずれかのデータ、及び、サーバとして機能する投影型表示装置自身の計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して、所定の透明度において、重ねて表示することを特徴とする。
【００３１】
請求項２０記載の発明は、請求項６記載の投影型表示装置を、ネットワークを介して複数台接続して行われる投影型表示装置を用いた表示画像の遠隔共有方法であって、サーバとして機能する１台の投影型表示装置は、投影手段と、仮想表示手段と、の計２つの投影手段を有し、仮想表示手段には、投影手段で投影している画像と同一の画像データを複製して仮想表示し、投影手段では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションにより表示手段に表示している電子文書の表示画像に対し、クライアントとして機能する少なくとも１台以上の投影型表示装置から、ネットワークを介して受信した３つのうちいずれかのデータ、及び、サーバとして機能する投影型表示装置自身の計測手段から得られるデータを、時系列変化する画像列、もしくは映像データに変換して、表示手段に表示している電子文書の表示画像に対して、所定の透明度において、重ねて表示し、且つ、その表示画像を、画面共有送信手段により、クライアント側の投影型表示装置に送信し、一方、仮想表示手段は、投影手段により表示手段に表示している表示画像と同一の表示画像を仮想表示し、該仮想表示画像を、画面共有送信手段により、クライアント側の投影型表示装置に送信し、１台のサーバとして機能する投影型表示装置に対して、少なくとも１台以上接続可能であるクライアント側の投影型表示装置は、サーバとして機能する投影型表示装置から受信した表示画像を画面共有受信手段により表示手段に表示することを特徴とする。
【００３２】
【発明の実施の形態】
以下、添付図面を参照しながら本発明にかかる実施の形態について詳細に説明する。
【００３３】
本発明にかかるコミュニケーションシステムは、図１に示すように、少なくとも２つの投影型表示装置がネットワークを介して接続して構成される。以下、図１を参照しながら、コミュニケーションシステムを構成する投影型表示装置の構成について説明する。
【００３４】
投影型表示装置は、画像データを表示するためのスクリーン（表示手段）（１）と、画像データをスクリーン（１）上に投影するためのプロジェクタ（投影手段）（２）と、スクリーン（１）上の画像データを撮影するビデオカメラ（撮像手段）（３）と、投影型表示装置を制御する情報処理手段（４）と、を有して構成されている。
【００３５】
上記構成からなる投影型表示装置は、スクリーン（１）上に対して、プロジェクタ（２）から画像データが投影されると共に、ビデオカメラ（３）により、スクリーン（１）上の画像データが撮影されることになる。なお、本実施の形態の投影型表示装置は、スクリーン（１）上に対して文字を書き込むことが可能であり、そのスクリーン（１）上に対する文字の書き込み方法としては、例えば、一般のホワイトボード用の水性マジックインクペンを用いて、プロジェクタ（２）により投影される面（投影面）とは反対側の面（書き込み面）から文字の書き込みが行われることになる。その書き込み画像が、投影面側からビデオカメラ（３）にて撮影されることになる。
【００３６】
投影型表示装置を制御する情報処理手段（４）は、例えば、一般のパーソナルコンピュータ（ＰＣ）等であり、スクリーン（１）上に表示したい文書データ（７）を、その文書データ（７）に関連付けられたアプリケーションソフトを用いてスクリーン（１）上に表示することになる。
【００３７】
なお、図１に示すように、ビデオエンコーダ（５）に具備する、貼り合わせソフト（６）は、スクリーン（１）上に対してユーザにより文字の書き込みが行われた際に、ビデオカメラ（３）によりスクリーン（１）上の書き込み画像を静止画像として撮影し、その撮影した静止画像に対して、人の手や体などにより生じる影などのノイズを、閾値処理等の画像処理を行うことにより除去した後、プロジェクタ（２）によりスクリーン（１）上に表示する文書データ（７）と同じ位置、同じ大きさとなるように、位置と大きさを調整して、例えば、ビットマップ画像データとして、文書データ（７）に貼り付けることになる（図１に示す、ビットマップ貼り付け）。
【００３８】
また、図１に示すように、ビデオエンコーダ（５）は、スクリーン（１）上の画像データをビデオカメラ（３）で撮影したビデオ映像を、ネットワークを介して接続された外部の投影型表示装置に送信する機能を有する。いわゆる、ネットワークカメラのような機能を具備することになる。
【００３９】
なお、本発明にかかるネットコミュニケーションシステムを構成する投影型表示装置は、ネットワークを介して接続される外部の投影型表示装置のビデオカメラ（３）が撮影したビデオ映像（図１に示す、Ｓ１）を受信して、その受信したビデオ映像に所定の処理を施し、スクリーン（１）上に表示する処理を行うアプリケーションを具備することになる（図１に示すビデオプレーヤ（８））。このビデオプレーヤ（８）は、スクリーン（１）上のデスクトップ領域の最前面に、書き込みが行われていない領域が透明となるように表示させる機能を有する。以下に、図２を参照しながら、外部の投影型表示装置から受信したビデオ映像に対して、書き込みが行われていない領域が透明となるように処理を施し、スクリーン（１）上の最前面に表示させるまでの処理動作について説明する。
【００４０】
まず、外部の投影型表示装置から受信したビデオ映像に対してノイズ除去等の画像処理を行う（ステップＳ１）。次に、ある閾値より明るい画素の値を白（０ｘＦＦＦＦＦＦＦＦ）にするように閾値処理を行う（ステップＳ２）。次に、先の閾値処理により白（０ｘＦＦＦＦＦＦＦＦ）となった画素を透明にして（ステップＳ３）、スクリーン上のデスクトップの最前面に表示する（ステップＳ４）。なお上記ステップＳ４の処理には、例えば、Ｍｉｃｒｏｓｏｆｔ  Ｗｉｎｄｏｗｓ（Ｒ）２０００のＵｐＤａｔｅＬａｙｅｒｅｄ  ＷｉｎｄｏｗというＡＰＩを用いることで実現可能となる。これにより、文書データが表示されたスクリーン（１）上の表示画像に対して、ネットワークを介して接続された外部の投影型表示装置から受信したビデオ映像の書き込み画像が、重なって表示されることになる。なお、デスクトップ、または、文書データを開いているアプリケーションのハンドルを取得し、そのデバイスコンテキストに、直接画像データを書き込む方法でも実現可能である。そして、最後に、外部の投影型表示装置から受信したビデオ映像の書き込み画像の大きさ、及び位置関係を、受信側の投影型表示装置のスクリーン（１）上に表示される表示画像の大きさ、及び位置関係と一致するように調整することになる（ステップＳ５）。その様子の一例を、図３に示す。
【００４１】
このように、本発明にかかるコミュニケーションシステムは、複数の投影型表示装置がネットワークを介して接続され、投影型表示装置の具備するビデオカメラで撮影したビデオ映像を、ネットワークを介して外部の投影型表示装置に送信すると共に、外部の投影型表示装置のビデオカメラで撮影したビデオ映像を受信して、上述した図２に示す処理を施すことで、外部の投影型表示装置から受信したビデオ映像を半透明にして、大きさ、及び位置関係を調整し、スクリーン（１）上の最前面に書き込み画像を表示する。これにより、ネットワークを介して接続された外部の投影型表示装置の具備するスクリーン（１）上に書き込まれている書き込み画像が、受信側の投影型表示装置のスクリーン（１）上にリアルタイムで表示されることになり、送信側の投影型表示装置のスクリーン（１）上の書き込み画像を把握することが出来ることになる。
【００４２】
（第１の実施の形態）
まず、図１を参照しながら、第１の実施の形態におけるコミュニケーションシステムについて説明する。
【００４３】
第１の実施の形態におけるコミュニケーションシステムは、スクリーン上に画像データを投影するプロジェクタと、スクリーン上に表示している文書データの表示画像に対して、書き込み可能な表示面を有するスクリーンと、書き込み内容を光学的に撮影し、光電変換により映像データとするビデオカメラと、ビデオカメラで撮像した映像データの書き込みデータを、スクリーン上に表示している文書データの表示画像に対して、位置、及び、大きさを調整し、元の文書データに貼り付ける情報処理手段と、有して構成されている複数の投影型表示装置がネットワークを介して接続されて構成される。
【００４４】
そして、投影型表示装置の具備するビデオカメラから得られるビデオ映像を、ネットワークを介して外部の投影型表示装置に送信し、外部の投影型表示装置から受信したビデオ映像を、投影型表示装置の具備するスクリーン上に表示している文書データの表示画像に対して、所定の透明度において、重ねて表示することを特徴とするものである。以下に、図１に示す第１の実施の形態におけるコミュニケーションシステムの処理動作について説明する。
【００４５】
まず、第１の投影型表示装置（図１の右側）の具備するビデオカメラ（３）により撮影したビデオ映像を、ネットワークを介して第２の投影型表示装置（図１に示す左側）に送信する（図１に示す、Ｓ１）。次に、第２の投影型表示装置は、第１の投影型表示装置から受信したビデオ映像を、ビデオプレーヤ（８）にて、上述した図２に示す処理を施し、ビデオ映像の書き込み映像と、文書データ（７）と、をプロジェクタ（２）により、スクリーン（１）上に重ね合わせて表示する。そして、そのスクリーン（１）上に書き込まれている手書きの様子をビデオカメラ（３）にて撮影し、その撮影したビデオ映像を、第１の投影型表示装置に送信する（図１に示す、Ｓ３）。但し、実際にはプロジェクタでスクリーンに投影された画像も映されてしまうが、上述した図２に示す処理にてその成分を逓減することになる。そして、第１の投影型表示装置でも、上述した第２の投影型表示装置と同様の処理を行い、第１の投影形表示装置の具備するスクリーン（１）上に表示することになる。
【００４６】
このように、ネットワークを介して接続された双方向の投影形表示装置において、相手側の投影形表示装置の具備するスクリーン（１）上に書き込まれる内容をリアルタイムで把握することが可能となり、しかも、その書き込み画像を、文書データと重ねてスクリーン（１）上に表示することになるので、別の表示領域を必要とせず、文書データの編集処理も容易に行うことが可能となる。
【００４７】
なお、スクリーン（１）上の書き込み画像を、ビデオカメラ（３）にて撮影し、その撮影した書き込み画像を文書データ（７）に貼り付ける。そして、その文書データを同期させることにより、文書データの協調作成を行うことも可能となる（図１に示す、Ｓ２）。以下に、この文書データの同期処理について説明する。なお、Ｓ２の処理である文書データの同期処理は、文書データの同期処理を行うアプリケーション（共通電子文書表示手段）を用いて行うことになる。
【００４８】
このアプリケーション（共通電子文書表示手段）に対して、お互いのネットワークアドレス（ＩＰアドレス）と、同期する文書データの投影型表示装置のパスを指定する。
【００４９】
例えば、第２の投影型表示装置の文書データ（図１に示す左側ｃ：￥ｍｙｓｙｎｃ￥ｃｏｏｐｅｒａｔｉｏｎ．ｄｏｃ）と、第１の投影型表意装置の文書データ（図１に示す右側ｄ：￥ｍｙｓｙｎｃ￥２００３０７２３￥ｃｏｏｐｅｒａｔｉｏｎ．ｄｏｃ）と、を同期させる設定にする。
【００５０】
そして、第２の投影表示装置で文書データを編集したり、スクリーン（１）への書き込み画像の貼付けを行い、文書データを上書き保存して、第１の投影型表示装置にも同じ文書データをスクリーン（１）上に表示したりする場合、この同期処理を行うことになる。
【００５１】
まず、同期処理が開始されると、第２の投影型表示装置の文書データが、第１の投影型表示装置に送信され、第１の投影型表示装置が文書データを受信すると、第１の投影型表示装置の文書データ（ｄ：￥ｍｙｓｙｎｃ￥２００３０７２３￥ｃｏｏｐｅｒａｔｉｏｎ．ｄｏｃ）を、第２の投影型表示装置から受信した文書データで上書きする。実際には、第２の投影型表示装置がこの上書き対象となる文書データを開いていると、他のプログラム（この同期プログラム）から、この文書データにアクセスできなくなるので、まず、文書データを開いている場合、文書データを閉じさせ、文書データの上書き処理を行うことになる。
【００５２】
なお、第２の投影型表示装置で編集した文書データを第１の投影型表示装置に同期させることも可能である。このように必要に応じて同期処理を行い、同一の文書データを両方の投影型表示装置で開き、スクリーン（１）上に表示することが可能となり、文書データの協調作成を容易に行うことが可能となる。
【００５３】
（第２の実施の形態）
次に、第２の実施の形態について説明する。
第２の実施の形態におけるコミュニケーションシステムは、投影型表示装置は、ビデオカメラで得た書き込み画像を、ネットワークで接続している外部の投影型表示装置に送信し、外部の投影型表示装置から受信した書き込み画像を、受信側の投影型表示装置の文書データに対して貼り付けることを特徴とするものである。
【００５４】
このように、第２の実施の形態は、第１の実施の形態におけるコミュニケーションシステムにおいて、更に、ネットワークを介した書き込み画像の貼り付け処理（図４に示す、Ｓ４の処理）が新たに加えられたものである。以下に、ネットワークを介した書き込み画像の貼り付け処理の動作について説明する。なお、貼り付け処理を明確にするために、サーバとして機能する投影型表示装置（図４に示す左側）と、クライアントとして機能する投影型表示装置（図４に示す右側）と仮定して説明する。なお、サーバとして機能する投影型表示装置と、クライアントとして機能する投影型表示装置と、の両装置は同一の文書データを開いており、その文書データが各投影型表示装置のプロジェクタにより、スクリーン上に投影されていることになる。
【００５５】
まず、クライアントとして機能する投影型表示装置から受信した書き込み画像を文書データに貼付けるためのパネルを、ＰＣのマウスでクリックし、貼り付け処理が開始される。すると、クライアントとして機能する投影型表示装置（図４に示す右側）の具備するビデオカメラ（３）は、スクリーン（１）上に表示されている表示画像を静止画像として撮影する。その際、プロジェクタ（２）でスクリーン（１）上に投影している映像が映らないように、撮影の瞬間はプロジェクタ（２）からの投影光を遮光する。例えば、シャッター等を用いて、静止画像の撮影のタイミング時に投影光を遮光する。次に、ビデオカメラ（３）で撮影された静止画像は、サーバとして機能する投影型表示装置（図４に示す左側）へと、ネットワークを介して送信されることになる（図４に示すＳ４）。
【００５６】
次に、サーバとして機能する投影型表示装置は、クライアントとして機能する投影型表示装置から静止画像を受信すると、サーバとして機能する投影型表示装置の具備するビデオエンコーダ（５）の貼り合わせソフト（６）を用いて、クライアントとして機能する投影型表示装置から受信した静止画像に対して、人の手や体などにより生じる影などのノイズを、閾値処理等の画像処理を行うことにより除去した後、プロジェクタ（２）によりスクリーン（１）上に表示する文書データ（７）と同じ位置、同じ大きさとなるように調整し、例えば、ビットマップ画像データとして、文書データ（７）に貼り付けることになる（図４に示す、ビットマップ貼り付け）。
【００５７】
なお、サーバとして機能する投影型表示装置では、クライアントとして機能する投影型表示装置から受信するビデオ映像により、クライアントとして機能する投影型表示装置の具備するスクリーン上にどのような書き込みが行われているのかを、リアルタイムでスクリーン上に表示されることになるため、クライアントとして機能する投影型表示装置側のスクリーン上に書き込まれる内容を確認して、クライアント側の投影型表示装置における書き込み画像を、サーバ側の投影型表示装置の文書データに貼り付けることが可能となる。
【００５８】
また、サーバ側の投影型表示装置とクライアント側の投影型表示装置との役割を逆にした場合（サーバ側の投影型表示装置における書き込み画像をクライアント側の投影型表示装置の電子文書に貼り付ける場合）も、同様な処理を行うことになる。
【００５９】
このように、サーバとして機能する投影型表示装置自身の具備するビデオカメラから取り込んだ書き込み画像を文書データに貼り付ける場合と同様な処理を行い、ネットワークを介して接続された外部の投影型表示装置の具備するビデオカメラで撮影した書き込み画像を受信して、その受信した書き込み画像を文書データに貼り付けることが可能となる。
【００６０】
また、ネットワークを介して接続された複数の投影型表示装置において、共通の文書データをスクリーン（１）上に表示することで、文書データの協調編集が可能となる。
【００６１】
例えば、ＮｅｔＭｅｅｔｉｎｇのホワイトボードアプリケーションのように、複数のＰＣから同時に制御できるアプリケーションを用いることとする。または、サーバとして機能する投影型表示装置において文書データの複製文書を作成し、その作成した複製文書を各投影型表示装置においてアプリケーションで開き、その開いた複製文書に対して書き込み画像の貼付けなどの編集処理を施した後、所望のタイミングで、各投影型表示装置の複製文書の同期を行い、文書データの内容を一致させ、その後、文書データを開き直すという方法で実現される。
【００６２】
なお、図４に示すコミュニケーションシステムは、クライアントとして機能する投影型表示装置からサーバとして機能する投影型表示装置に対してのみ、静止画像を送信したが（図４に示すＳ４）、この静止画像を双方向に送信することも可能である。
【００６３】
また、リアルタイム用のビデオ映像は、貼り付け用の静止画像の撮影を行うときよりも、低解像度で撮影し、通信量を減少させることが好ましい。また、ビデオのフレームレートも、例えば、１秒間に１コマなどの落として、通信量を減少させることが好ましい。
【００６４】
また、各投影型表示装置が、マイクロフォン、スピーカおよび音声通信を行う手段を具備することにより、音声情報を補助手段として双方のコミュニケーションを行うことも可能となる。
【００６５】
（第３の実施の形態）
次に、第３の実施の形態について説明する。
第３の実施の形態におけるコミュニケーションシステムは、投影型表示装置の具備する情報処理手段は、スクリーン上に表示する画面データの一部または全部を、ネットワークを介して接続される外部に投影型表示装置に送信する画面共有サーバ機能と、外部の投影型表示装置から受信した画面データをスクリーン上に表示する画面共有クライアント機能と、により両方の投影型表示装置において共通の画面データをスクリーン上に表示することが可能となる画面共有機能を有して構成される。
【００６６】
そして、サーバとして機能する１台の投影型表示装置は、そのサーバとして機能する投影型表示装置自身が起動しているアプリケーションによりスクリーン上に表示している文書データに対して、ネットワークを介して接続されたクライアントとして機能する１台の投影型表示装置から受信したビデオ映像を、所定の透明度において、重ねて表示し、且つ、その表示した共有画面データを、画面共有サーバ機能により、クライアント側の投影型表示装置に送信する。クライアント側の投影型表示装置は、サーバ側の投影型表示装置から受信した共有画面データを画面共有クライアント機能によりスクリーン上に表示すると共に、且つ、このスクリーン上に表示した共有画面データに対して、サーバ側の投影型表示装置から受信したビデオ映像を、所定の透明度において、重ねて表示することとなる。
【００６７】
このように、第３の実施の形態におけるコミュニケーションシステムは、ＶＮＣ（Ｖｉｒｔｕａｌ  Ｎｅｔｗｏｒｋ  Ｃｏｍｐｕｔｉｎｇ）やＭｉｃｒｏｓｏｆｔ社のＮｅｔ  Ｍｅｅｔｉｎｇのような画面共有機能が搭載されたソフト（図５に示す、画面共有（９））を用いて画面共有を行い、書き込み画像の正確な位置合わせを行うことを特徴とするものである。以下、図５を参照しながら、第３の実施の形態における処理動作について説明する。
【００６８】
なお、第３の実施例は、ＶＮＣを用いて画面共有を行う場合の処理動作について説明する。
【００６９】
まず、ＶＮＣサーバとして機能している投影型表示装置（図５に示す左側）と、ＶＮＣクライアントとして機能している投影型表示装置（図５に示す右側）とが、１対１で接続されて、画面共有を行っていると仮定する。なお、協調編集する文書データは、サーバ側の投影型表示装置のみで起動していることにする。
【００７０】
サーバ側の投影型表示装置では、文書データをアプリケーションで開き、その開いた文書データの上に、ネットワークを介して接続されたクライアント側の投影型表示装置の書き込み画像を半透明に重ね合わせてスクリーン（１）上の最前面に表示する。また、その重ね合わせた画像データは、画面共有サーバ機能（９）により画面共有が行われることになる。そして、その画面共有が行われた共有画像データがクライアント側の投影型表示装置に送信されることになる。
【００７１】
次に、クライアント側の投影型表示装置では、文書データを開く代わりに、サーバ側の投影型表示装置から送信された共有画面データを、画面共有クライアント機能（９）を用いてスクリーン（１）上に表示することになる。そして、そのスクリーン（１）上に表示した共有画面データの上に、サーバ側の投影型表示装置から受信したビデオ映像の書き込み画像をビデオプレーヤ（８）を介して半透明に重ね合わせ、スクリーン（１）上の最前面に表示することになる。
【００７２】
これにより、サーバ側と、クライアント側と、の両方の投影型表示装置において、同一の画面データをスクリーン（１）上に表示することが可能になると同時に、お互いのスクリーン（１）上に書き込まれた書き込み画像を重ねて表示することも可能となり、相手側がスクリーン（１）上に何を書いているのかを把握することが可能となる。但し、クライアント側の書き込み画像は、画面共有クライアント機能（９）により、クライアント側の投影型表示装置のスクリーン（１）上に冗長に表示されてしまうことになる。
【００７３】
また、第２の実施の形態と同様に、サーバ側の投影型表示装置は、クライアント側の投影型表示装置の具備するビデオカメラ（３）から書き込み静止画像を撮影し、サーバ側の投影型表示装置の開いている文書データに対して位置と、大きさを合わせて貼り付けることも可能である（図５に示すビットマップ貼り付け）。
【００７４】
次に、図５に示す第３の実施の形態におけるコミュニケーションシステムの処理動作について説明する。なお、以下の番号は、図面での処理動作の番号を示唆するものである。
【００７５】
（サーバとして機能する投影型表示装置の処理動作）
１．クライアント側のビデオ映像を受信し、その受信したビデオ映像を半透明に重ねた画面をスクリーン上に表示する。
２．クライアント側のビデオカメラで撮影した書き込み画像を受信し、文書データに貼り付ける。また、サーバ自身のビデオカメラで撮影した書き込み画像を、文書データに貼り付ける。
３．サーバ自身の文書データにクライアント側のビデオ映像を半透明に重ねて画面共有し、その共有画面データをクライアント側に送信する。
４．サーバ側のビデオカメラで撮影したビデオ映像をクライアント側に送信する。
【００７６】
（クライアントとして機能する投影型表示装置の処理動作）
１．クライアント側のビデオカメラで撮影したビデオ映像をサーバ側に送信する。
２．クライアント側のビデオカメラで撮影した書き込み画像をサーバ側に送信する。
３．サーバ側から送信された共有画面データを受信し、スクリーン上に表示する。
４．サーバ側から送信されたビデオ映像を受信し、その受信したビデオ映像を半透明に重ねた画面をスクリーン上に表示する。
【００７７】
（第４の実施の形態）
次に、第４の実施の形態について説明する。
第４の実施の形態におけるコミュニケーションシステムは、投影型表示装置の具備する情報処理手段は、スクリーン上に表示する画面データの一部または全部を、ネットワークを介して接続される外部の投影型表示装置に送信する画面共有サーバ機能と、外部の投影型表示装置から受信した画面データをスクリーン上に表示する画面共有クライアント機能と、により両方の投影型表示装置において共通の画面データをスクリーン上に表示することが可能となる画面共有機能を有して構成される。
【００７８】
そして、サーバとして機能する１台の投影型表示装置は、サーバとして機能する投影型表示装置自身が起動しているアプリケーションによりスクリーン上に表示している文書データに対して、クライアントとして機能する少なくとも１台以上の、投影型表示装置のビデオカメラで撮影したビデオ映像をネットワークを介して受信し、その受信したビデオ映像と、サーバとして機能する投影型表示装置自身のビデオカメラから取得したビデオ映像とを、ビデオプレーヤを介して、スクリーン上に表示している文書データの画像に対して、所定の透明度において、重ねて表示し、且つ、その重ねた表示画像を、画面共有サーバ機能により、クライアント側の投影型表示装置に送信し、クライアント側の投影型表示装置は、サーバとして機能する投影型表示装置から受信した共有画面データを画面共有クライアント機能によりスクリーン上に表示することを特徴とするものである。
【００７９】
このように、第４の実施の形態におけるコミュニケーションシステムは、複数の書き込み画像を、サーバとして機能する投影型表示装置の画面共有サーバ機能（９）を用いて画面共有を行うことにより、通信量を削減することを特徴とするものである。以下、図６を参照しながら、第４の実施の形態におけるコミュニケーションシステムの処理動作について説明する。
【００８０】
なお、第４の実施の形態におけるコミュニケーションシステムは、ＶＮＣサーバとして機能している投影型表示装置と、１台以上のＶＮＣクライアントとして機能している投影型表示装置とが、１対多で接続し、画面共有を行うシステム構成である。また、協調編集する文書データは、サーバ側の投影型表示装置でのみ起動していることとする。なお、第４の実施の形態におけるコミュニケーションシステムのシステム構成は、第３の実施の形態におけるコミュニケーションシステムのシステム構成と異なり、３台以上の投影型表示装置でコミュニケーションが可能である。
【００８１】
サーバ側の投影型表示装置では、文書データをアプリケーションで開き、その上に、サーバ側の投影型表示装置と全クライアント側の投影型表示装置との書き込み画像を半透明に重ね合わせてスクリーン（１）上の最前面に表示する。そして、その重ね合わせた画面データを画面共有サーバ機能（９）により、画面共有を行い、共有画面データをクライアント側の投影型表示装置に送信する。クライアント側の投影型表示装置では、クライアント側の投影型表示装置から受信した共有画面データを、画面共有クライアント機能（９）を用いてスクリーン（１）上に表示する。
【００８２】
これにより、サーバ側と、クライアント側と、の両者の投影型表示装置において同一の文書データをスクリーン（１）上に表示することが可能になると同時に、全ての投影型表示装置の書き込み画像を重ねて表示することが可能となり、相手側の投影型表示装置のスクリーン（１）上に書き込まれた書き込み画像を把握することが可能となる。但し、各クライアント側の投影型表示装置の書き込み画像は、クライアント側の投影型表示装置のスクリーン（１）上に冗長に表示されてしまうことになる。
【００８３】
また、第２の実施の形態と同様に、サーバ側の投影型表示装置は、クライアント側の投影型表示装置の具備するビデオカメラ（３）から書き込み静止画像を撮影し、サーバ側の投影型表示装置の開いている文書データに対して位置と、大きさを合わせて貼り付けることも可能である。
【００８４】
次に、図６に示す第４の実施の形態におけるコミュニケーションシステムの処理動作について説明する。なお、以下の番号は、図面での処理動作の番号を示唆するものである。
【００８５】
（サーバとして機能する投影型表示装置の処理動作）
１．全クライアント側のビデオ映像を受信し、サーバ側のビデオ映像と全クライアント側から受信したビデオ映像とを半透明に重ねた画面をスクリーン上に表示する。
２．任意のクライアント側のビデオカメラで撮影した書き込み画像を受信し、文書データに貼付ける。
３．サーバ側と全クライアント側とのビデオ映像を半透明に重ねた画面を画面共有し、その共有画面データを全クライアント側に送信する。
４．サーバ自身のビデオカメラから書き込み画像を撮影し、文書データに貼付ける。
【００８６】
（クライアントとして機能する投影型表示装置の処理動作）
１．クライアント側のビデオカメラで撮影したビデオ映像をサーバ側に送信する。
２．クライアント側のビデオカメラで撮影した書き込み画像をサーバ側に送信する。
３．サーバ側から送信された共有画面データを受信し、その受信した共有画面データをスクリーン上に表示する。
【００８７】
（第５の実施の形態）
次に、第５の実施の形態について説明する。
第５の実施の形態におけるコミュニケーションシステムは、投影型表示装置は、スクリーン上の同一領域を照明するよう光学系が設計された、２台のプロジェクタを有し、投影型表示装置の情報処理手段は、２台のプロジェクタに対して、別々のビデオ信号を送信し、かつ、スクリーン上に表示する画面データの一部または全部を、ネットワークを介して接続される外部の投影型表示装置に送信する画面共有サーバ機能と、外部の投影型表示装置から受信した画面データをスクリーン上に表示する画面共有クライアント機能と、により共通の画面データをスクリーン上に表示することが可能な画面共有機能を有して構成される。
【００８８】
そして、サーバとして機能する１台の投影型表示装置は、第１のプロジェクタでは、サーバとして機能する投影型表示装置自身が起動しているアプリケーションによりスクリーン上に表示している文書データをスクリーン上に投影すると共に、共有画像データを画面共有サーバ機能により、クライアント側の投影型表示装置に送信し、第２のプロジェクタでは、クライアントとして機能する少なくとも１台以上の、投影型表示装置のビデオカメラからネットワークを介して受信したビデオ映像をスクリーン上に投影し、一方、クライアント側の投影型表示装置は、第１のプロジェクタでは、サーバ側の投影型表示装置から受信した共有画面データを、画面共有クライアント機能によりスクリーン上に投影し、第２のプロジェクタでは、サーバ側の投影型表示装置から受信したビデオ映像をスクリーン上に投影することを特徴とするものである。
【００８９】
このように、第５の実施の形態におけるコミュニケーションシステムは、サーバとして機能する投影型表示装置において、書き込み画像を、画面共有サーバ機能（図７に示す、画面共有Ｓ）にて画面共有を行う際に、プロジェクタ（２）を２つ（図７に示す、プロジェクタと、第２のプロジェクタ）搭載し、スクリーン（１）上の同一領域を照明することで、画面共有処理の負荷を軽減することを特徴とするものである。以下、図７を参照しながら、第５の実施の形態におけるコミュニケーションシステムの処理動作について説明する。
【００９０】
投影型書表示装置の情報処理手段は、２台のプロジェクタに対して、別々のビデオ信号を送信する。つまり、デュアルディスプレイに対応したビデオドライバを利用することになる。
【００９１】
なお、ビデオ映像は画面共有を行う必要がなくなるので、画面共有の処理負荷が低減する。また、ビデオ映像を透明化して重ね合わせる必要がなくなるので、画面共有の処理負荷が低減する。
【００９２】
次に、図７に示す第５の実施の形態におけるコミュニケーションシステムの処理動作について説明する。なお、以下の番号は、図面での処理動作の番号を示唆するものである。
【００９３】
（サーバとして機能する投影型表示装置の処理動作）
１．全クライアント側のビデオ映像を受信し、その受信した全クライアント側のビデオ映像を半透明に重ねた画面データを第２のプロジェクタでスクリーン上に表示する。
２．任意のクライアント側のビデオカメラで撮影した書き込み画像を受信し、文書データに貼付ける。
３．文書データを第１のプロジェクタでスクリーン上に表示し、且つ、画面共有した共有画面データを全クライアント側に送信する。
４．サーバ側のビデオカメラで撮影したビデオ映像を全クライアント側に送信する。
【００９４】
（クライアントとして機能する投影型表示装置の処理動作）
１．クライアント側のビデオカメラで撮影したビデオ映像をサーバ側に送信する。
２．クライアント側のビデオカメラで撮影した書き込み画像をサーバ側に送信する。
３．サーバ側の共有画面データを受信し、その受信したサーバ側の共有画面データを第１のプロジェクタでスクリーン上に表示する。
４．サーバ側のビデオ映像を受信し、その受信したサーバ側のビデオ映像を第２のプロジェクタでスクリーン上に表示する。
【００９５】
（第６の実施の形態）
次に、第６の実施の形態について説明する。
第６の実施の形態におけるコミュニケーションシステムは、投影型表示装置の具備する情報処理手段は、スクリーン上に表示する画面データの一部または全部を、ネットワークを介して接続される外部の投影型表示装置に送信する画面共有サーバ機能と、外部の投影型表示装置から受信した画面データをスクリーン上に表示する画面共有クライアント機能と、により、共通の画面データをスクリーン上に表示することが可能な画面共有機能を有して構成される。
【００９６】
そして、サーバとして機能する１台の投影型表示装置は、スクリーンの同一領域を照明するよう光学系が設計された、２台のプロジェクタを有しており、投影型表示装置の具備する情報処理手段は、２台のプロジェクタに対して、別々のビデオ信号を送信し、第１のプロジェクタでは、サーバとして機能する投影型表示装置自身が起動しているアプリケーションによりスクリーン上に表示している文書データをスクリーン上に投影すると共に、共有画像データを画面共有サーバ機能により、クライアント側の投影型表示装置に送信し、第２のプロジェクタでは、クライアントとして機能する１台の、投影型書表示装置のプロジェクタからネットワークを介して受信したビデオ映像をスクリーン上に投影する。一方、１台のサーバとして機能する投影型表示装置に対して、１台まで接続可能であるクライアント側の投影型表示装置は、サーバとして機能する投影型表示装置から受信した画面データを画面共有クライアント機能によりスクリーン上に表示すると共に、且つ、この表示画像に、サーバ側の投影型表示装置から受信したビデオ映像を、所定の透明度において、重ねて表示することを特徴とするものである。
【００９７】
このように、第６の実施の形態にコミュニケーションシステムは、サーバ側の投影型表示装置のみ２つのプロジェクタを有して構成される。なお、クライアント側の投影型表示装置は、プロジェクタが１つなので、ビデオ映像を透明化して重ね合わせる。クライアント側の投影型表示装置は１台しか接続出来ないが、クライアント専用機としてシステムを構成する場合、プロジェクタの台数分安価になる。
【００９８】
次に、図８に示す第６の実施の形態におけるコミュニケーションシステムの処理動作について説明する。なお、以下の番号は、図面での処理動作の番号を示唆するものである。
【００９９】
（サーバとして機能する投影型表示装置の処理動作）
１．クライアント側のビデオ映像を受信し、その受信したクライアント側のビデオ映像を第２のプロジェクタでスクリーン上に表示する。
２．クライアント側のビデオカメラで撮影した書き込み画像を受信し、その受信した書き込み画像を、文書データに貼付ける。また、サーバ自身のビデオカメラから書き込み画像を撮影し、文書データに貼付ける。
３．文書データを第１のプロジェクタでスクリーン上に表示し、且つ、文書データを画面共有し、その共有画面データをクライアントに送信する。
４．サーバ側のビデオカメラで撮影したビデオ映像をクライアント側に送信する。
【０１００】
（クライアントとして機能する投影型表示装置の処理動作）
１．クライアント自身のビデオカメラから撮影したビデオ映像をサーバ側に送信する。
２．クライアント自身のビデオカメラから撮影した書き込み画像をサーバ側に送信する。
３．４．サーバ側の共有画面データを受信し、また、サーバ側のビデオ映像を受信し、サーバ側の共有画面に、サーバ側のビデオ映像を半透明に重ねた画面をスクリーン上に表示する。
なお、上記第６の実施の形態におけるコミュニケーションシステムは、クライアント側の投影型表示装置がプロジェクタを２台持ち、上記の方法を行うことも可能である。
【０１０１】
次に、第７の実施の形態について説明する。
第７の実施の形態におけるコミュニケーションシステムは、投影型表示装置の具備する情報処理手段は、スクリーン上に表示する画面データの一部または全部を、ネットワークを介して接続される外部の投影型表示装置に送信する画面共有サーバ機能と、外部の投影型表示装置から受信した画面データをスクリーン上に表示する画面共有クライアント機能と、により、共通の画面データをスクリーン上に表示することが可能な画面共有機能を有して構成される。
【０１０２】
そして、サーバとして機能する１台の投影型表示装置は、スクリーン上の同一領域を照明するよう光学系が設計された、２台のプロジェクタを有し、投影型表示装置の具備する情報処理手段は、２台のプロジェクタに対して、別々のビデオ信号を送信し、第１のプロジェクタでは、サーバとして機能する投影型表示装置自身が起動しているアプリケーションによりスクリーン上に表示している文書データに対し、サーバとして機能する投影型表示装置自身のビデオカメラからのビデオ映像を、スクリーン上に表示している文書データに対して、所定の透明度において、重ねて表示し、その共有画面データを、画面共有サーバ機能により、クライアント側の投影型表示装置に送信し、第２のプロジェクタでは、クライアントとして機能する１台の、投影型表示装置のビデオカメラで撮影したビデオ映像を、ネットワークを介して受信し、その受信したビデオ映像をスクリーン上に投影し、一方、１台のサーバとして機能する投影型表示装置に対して、１台まで接続可能であるクライアント側の投影型表示装置は、サーバとして機能する投影型表示装置から受信した共有画面データを画面共有クライアント機能によりスクリーン上に表示することを特徴とするものである。
【０１０３】
このように、第７の実施の形態におけるコミュニケーションシステムは、サーバとして機能する投影型表示装置のみ２つのプロジェクタを有し、第６の実施の形態におけるコミュニケーションシステムに対して、更に、クライアントとして機能する投影型表示装置の負荷を小さくし、逆に、サーバとして機能する投影型表示装置の負荷を大きくした構成を特徴とするものである。なお、本実施の形態では、サーバとして機能する投影型表示装置自身のビデオ映像は画面共有するので、第６の実施の形態におけるコミュニケーションシステムより画面共有処理の負荷が大きくなる。しかし、第４の実施の形態におけるコミュニケーションシステムのように、サーバとして機能する投影型表示装置側でサーバ側とクライアント側との両方投影型表示装置のビデオ映像を画面共有する場合より、負荷は小さいことになる。
【０１０４】
一方、サーバとして機能する投影型表示装置がサーバ自身のビデオ映像を画面共有サーバ機能により処理しているため、クライアント側として機能する投影型表示装置は、画面共有クライアント機能により共有画像データをスクリーン上に表示するだけで済み、サーバ側の共有画面に、サーバ側のビデオ映像を半透明に重ねた画面を表示する必要がなくなる。これにより、サーバ側のビデオ映像を受信しなくてよいので、場合によっては通信効率が向上することになる。
【０１０５】
次に、図９に示す第７の実施の形態におけるコミュニケーションシステムの処理動作について説明する。なお、以下の番号は、図面での処理動作の番号を示唆するものである。
【０１０６】
（サーバとして機能する投影型表示装置の処理動作）
１．クライアント側のビデオ映像を受信し、その受信したクライアント側のビデオ映像を第２のプロジェクタでスクリーン上に表示する。
２．クライアント側のビデオカメラから撮影した書き込み画像を受信し、文書データに貼付ける。また、サーバ自身のビデオカメラから書き込み画像を撮影し、文書データに貼付ける。
３．サーバ側のビデオ映像を半透明に重ねた画面を、第１のプロジェクタでスクリーン上に表示する。また、サーバ側のビデオ映像を半透明に重ねた画面を画面共有し、その共有画面データをクライアント側に送信する。
【０１０７】
（クライアントとして機能する投影型表示装置の処理動作）
１．クライアント側のビデオカメラで撮影したビデオ映像をサーバ側に送信する。
２．クライアント側のビデオカメラで撮影した書き込み画像をサーバ側に送信する。
３．サーバ側の共有画面データを受信し、その受信した共有画面データをスクリーン上に表示する。
【０１０８】
なお、上記第７の実施の形態におけるコミュニケーションシステムは、クライアント側の投影型表示装置がプロジェクタを２台持ち、上記の方法を行うことも可能である。
【０１０９】
（第８の実施の形態）
次に、第８の実施の形態について説明する。
第８の実施の形態におけるコミュニケーションシステムは、投影型表示装置の具備する情報処理手段は、スクリーン上に表示する画面データの一部または全部を、ネットワークを介して接続される外部の投影型表示装置に送信する画面共有サーバ機能と、外部の投影型表示装置から受信した画面データをスクリーン上に表示する画面共有クライアント機能と、により、共通の画面データをスクリーン上に表示することが可能な画面共有機能を有して構成される。
【０１１０】
そして、サーバとして機能する１台の投影型表示装置は、プロジェクタと、仮想表示装置との計２台の投影装置を有して構成され、それぞれ別々のビデオ信号を送信する。そして、プロジェクタでは、サーバとして機能する投影型表示装置自身が起動しているアプリケーションによりスクリーン上に表示している文書データに対し、クライアントとして機能する１台の投影型表示装置のビデオカメラからネットワークを介して受信したビデオ映像を、スクリーン上に表示している文書データの画面に対して、所定の透明度において、重ねて表示している画面をスクリーン上に投影し、一方、仮想表示装置では、サーバとして機能する投影型表示装置自身が起動しているアプリケーションによりスクリーン上に表示している文書データの画面データの複製データを作成し、その複製した画面データに対して、サーバとして機能する投影型表示装置自身のビデオカメラからのビデオ映像を、仮想表示装置で仮想的に表示している文書データの画像に対して、所定の透明度において、重ねて仮想表示し、その仮想表示画面を、画面共有サーバ機能により、クライアント側の投影型表示装置に送信する。一方、１台のサーバとして機能する投影型表示装置に対して、１台まで接続可能であるクライアント側の投影型表示装置は、サーバとして機能する投影型表示装置から受信した画面データを画面共有クライアント機能によりスクリーン上に表示することを特徴とするものである。
【０１１１】
このように、第８の実施の形態におけるコミュニケーションシステムは、仮想表示画面に高速描画し、仮想表示画面の画面データをキャプチャ可能な画面共有サーバ機能で、画面データをとらえることになる。また、仮想表示画面で画面共有サーバ機能を起動させ、仮想表示画面の描画データの複製データから画面データを取得するソフトウェアとしては、ＶＤＡＣＣ  ＶＮＣと呼ばれる、ＶＮＣの派生ソフトウェアや、Ｒｅｍｏｔｅ  ＡｄｍｉｎｉｓｔｒａｔｏｒやＮｅｔ  Ｏｐなどが挙げられる。
【０１１２】
また、文書データに、クライアント側のビデオ映像を半透明に重ねた画面はプロジェクタでスクリーン上に投影すると共に、その描画信号を仮想表示デバイス用に複製する。一方、サーバ側のビデオ映像は、仮想表示デバイス側のみに対して出力し、仮想表示画面で半透明にして重ね合わせる。そして、仮想表示画面で画面共有することにより、画面共有サーバ機能は、実際に描画を行うよりも高速に、画面データの差分をキャプチャすることが可能となり、スムーズな画面共有が行えるようになる。
【０１１３】
次に、図１０に示す第８の実施の形態におけるコミュニケーションシステムの処理動作について説明する。なお、以下の番号は、図面での処理動作の番号を示唆するものである。
【０１１４】
（サーバとして機能する投影型表示装置の処理動作）
１．クライアント側のビデオ映像を受信し、その受信したクライアント側のビデオ映像を半透明に重ねた画面をスクリーン上に表示する。
２．クライアント側のビデオカメラで撮影した書き込み画像を受信し、文書データに貼付ける。また、サーバ自身のビデオカメラから書き込み画像を撮影し、文書データに貼付ける。
３．クライアント側のビデオ映像を半透明に重ねた画面データを仮想表示画面で表示する（画面描画データを仮想表示画面に複製する）。また、その仮想表示画面に対して、更に、サーバ側のビデオカメラで撮影したビデオ映像を半透明に重ねた画面を仮想画面で表示する。そして、仮想画面を画面共有し、共有画面データをクライアント側に送信する。
【０１１５】
（クライアントとして機能する投影型表示装置の処理動作）
１．クライアント側のビデオカメラで撮影したビデオ映像をサーバ側に送信する。
２．クライアント側のビデオカメラで撮影した書き込み画像をサーバ側に送信する。
３．サーバ側の共有画面データを受信し、その受信した共有画面データをスクリーンに表示する。
【０１１６】
（第９の実施の形態）
次に、第９の実施の形態について説明する。
第９の実施の形態におけるコミュニケーションシステムは、投影型表示装置の具備する情報処理手段は、スクリーン上に表示する画面データの一部または全部を、ネットワークを介して接続された外部の投影型表示装置に送信する画面共有サーバ機能と、外部の投影型表示装置から受信した共有画面データをスクリーン上に表示する画面共有クライアント機能と、により、共通の画面をスクリーン上に表示することが可能な画面共有機能を有して構成される。
【０１１７】
なお、サーバとして機能する１台の投影型表示装置は、プロジェクタと、仮想表示装置と、の計２台の投影装置を有して構成されており、仮想表示装置は、プロジェクタによりスクリーン上に投影しているの画面データと同一の画面データを複製して仮想表示する機能を有している。
【０１１８】
そして、サーバとして機能する投影型表示装置の具備するプロジェクタでは、サーバとして機能する投影型表示装置自身が起動しているアプリケーションによりスクリーン上に表示している文書データに対し、クライアントとして機能する少なくとも１台以上の投影型表示装置のプロジェクタからネットワークを介して受信したビデオ映像を、サーバとして機能する投影型表示装置自身がスクリーン上に表示している文書データに対して、所定の透明度において、重ねて表示し、一方、仮想表示装置は、プロジェクタによりスクリーン上に表示しているの画面データと同様の画面データを仮想表示しており、その仮想表示画面を、画面共有サーバ機能により、クライアント側の投影型表示装置に送信する。一方、１台のサーバとして機能する投影型表示装置に対して、少なくとも１台以上が接続可能であるクライアント側の投影型表示装置は、サーバとして機能する投影型表示装置から受信した共有画面データを画面共有クライアント機能によりスクリーン上に表示することを特徴とするものである。
【０１１９】
このように、第９の実施の形態におけるコミュニケーションシステムは、文書データに対して、サーバ側と全クライアント側との投影型表示装置のビデオ映像を半透明に重ねた画面を、プロジェクタを介してスクリーン上に表示すると共に、仮想表示画面に対して描画信号を複製し、仮想表示画面で画面共有を行う。この場合、サーバ側の投影型表示装置自身のビデオ映像も、サーバ側のプロジェクタを介してスクリーン上に表示するので冗長になってしまうが、第８の実施の形態におけるコミュニケーションシステムに対して、本実施の形態のコミュニケーションシステムは、サーバとして機能する投影型表示装置が、複数のクライアントとして機能する投影型表示装置と接続することが可能となる。
【０１２０】
次に、図１１に示す第９の実施の形態におけるコミュニケーションシステムの処理動作について説明する。なお、以下の番号は、図面での処理動作の番号を示唆するものである。
【０１２１】
（サーバとして機能する投影型表示装置の処理動作）
１．全クライアント側のビデオ映像を受信し、サーバ側と全クライアント側のビデオ映像を半透明に重ねた画面をスクリーン上に表示する。
２．任意のクライアント側のビデオカメラで撮影した書き込み画像を受信し、文書データに貼り付ける。また、サーバ自身のビデオカメラから書き込み画像を撮影し、文書データに貼付ける。
３．サーバ側と全クライアント側とのビデオ映像を半透明に重ねた画面を仮想表示画面で表示する（画面描画データを仮想表示画面に複製する）。そして、仮想表示画面を画面共有し、その共有画面データを全クライアント側に送信する。
【０１２２】
（クライアントとして機能する投影型表示装置の処理動作）
１．クライアント側のビデオカメラで撮影したビデオ映像をサーバ側に送信する。
２．クライアント側のビデオカメラで撮影した書き込み画像をサーバ側に送信する。
３．サーバ側の共有画面データを受信し、その受信した共有画面データをスクリーン上に表示する。
【０１２３】
（第１０の実施の形態）
次に、第１０の実施の形態について説明する。
第１０の実施の形態におけるコミュニケーションシステムは、スクリーン上に表示している文書データに対して、書き込みを行うことが可能な表示面を有するスクリーンと、そのスクリーン上への書き込み動作により、表示面における書き込みの座標データを計測するデジタイザと、そのデジタイザから得られる書き込みの座標データを基に画像データに変換し、その変換した画像データを、スクリーン上に表示している文書データに対して、位置、及び大きさを調整し、元の文書データに貼り付ける情報処理手段と、を有する投影型表示装置がネットワークを介して複数台接続して構成されるものである。
【０１２４】
そして、その投影型表示装置は、デジタイザから得られる座標データ、または座標データの時系列変化を表すベクトルデータ、もしくはベクトルデータを画像として表現した画像データの３つのうち少なくともいずれかのデータを、ネットワークを介して接続される外部の投影型表示装置に送信する機能と、外部の投影型表示装置から受信した上記の３つのうちいずれかのデータを時系列変化する画像列、もしくは、映像データに変換して、スクリーン上に表示している文書データの画像に対して、所定の透明度において、重ねて表示する機能と、外部の投影型表示装置から受信した受信データを画像または、描画オブジェクトとして、投影型表示装置自身がアプリケーションで開いている文書データに対して、貼り付ける機能と、を更に有して構成される。
【０１２５】
このように、第１０の実施の形態におけるコミュニケーションシステムは、スクリーン上に対してマーカ等で書き込んだ書き込み画像をビデオカメラで撮影するのではなく、赤外線方式や、超音波方式や、もしくは、静電誘導により、スクリーン上に書き込まれた書き込みの座標データを、デジタイザにより取得し、そのデジタイザにより取得した座標データを、点または線で表現してスクリーン上に描画することになる。なお、デジタイザにより座標データを取得する手段以外にも、通常のマウスを利用した描画を基に、座標データを取得することも可能である。
【０１２６】
次に、図１２に示す第１０の実施の形態におけるコミュニケーションシステムの処理動作について説明する。なお、以下の番号は、図面での処理動作の番号を示唆するものである。
【０１２７】
（サーバ側として機能する投影型表示装置の処理動作）
１．クライアント側のベクトルデータを受信し、その受信したクライアント側のベクトルデータを描画した画像データを、半透明にして重ねた画面をスクリーン上に表示する。また、ベクトルデータをビットマップ画像として文書データに貼付ける。
２．サーバ側のデジタイザで取得した座標データを、ベクトルデータに変換し、クライアント側に送信する。
３．クライアント側に文書データを送信する（サーバ側との同期処理）。
【０１２８】
（クライアント側として機能する投影型表示装置の処理動作）
１．クライアント側のデジタイザで取得した座標データを、ベクトルデータに変換し、サーバ側に送信する。
２．サーバ側のベクトルデータを受信し、その受信したサーバ側のベクトルデータを描画した画像データを、半透明にして重ねた画面をスクリーン上に表示する。また、ベクトルデータをビットマップ画像として文書データに貼付ける。
３．サーバ側に文書データを送信する（クライアント側との同期処理）。
【０１２９】
なお、上記第１０の実施の形態において、ビットマップ化した書き込み画像を文書データに貼付けるのではなく、描画オブジェクト、すなわち、点、及び、線の集合として、貼り付けるようにすることも可能である。また、デジタイザから取得した座標データの通信方法としては、以下の３つの方法がある。
【０１３０】
第１の通信方法．座標データそのものを送信する方法。
第２の通信方法．ベクトルデータを送信する方法。
第３の通信方法．送信元で座標データを画像化して、画像データとして送信する方法。
【０１３１】
なお、図１２に示す第１０の実施の形態におけるコミュニケーションシステムの処理動作としては、第２の通信方法を基に説明したが、第１の通信方法や第３の通信方法を用いて行うことも可能である。以下に、図１３から図１５を参照しながら、第１から第３の通信方法の処理動作について説明する。なお、図１３は、第１の通信方法を示し、図１４は、第２の通信方法を示し、図１５は、第３の通信方法を示す。
【０１３２】
（第１の通信方法）
まず、図１３を参照しながら、第１の通信方法について説明する。
なお、サーバ側の投影型表示装置は、サーバ側の投影型表示装置自身、及び、ネットワークを介して接続された外部のライアント側の投影型表示装置に対して、デジタイザにより取得した座標データそのものを送信する機能を有し、クライアント側の投影型表示装置は、サーバ側の投影型表示装置から受信した座標データをベクトルデータに変換し、それを更に画像化し、サーバ側の投影型表示装置で開く文書データに貼り付ける機能と、第１の実施の形態で説明した図２に示す原理を用いて、スクリーン上の最前面に、半透明にして重ね合わせて表示する機能と、を有する。
【０１３３】
まず、サーバ側の投影型表示装置の具備するデジタイザにより、スクリーン上に書き込まれた書き込み座標データを取得する（ステップＳ１０）。次に、そのデジタイザにより取得した座標データをクライアント側の投影型表示装置に送信し（ステップＳ１１）、クライアント側の投影型表示装置が、サーバ側の投影型表示装置から座標データを受信することになる（ステップＳ１２）。
【０１３４】
次に、クライアント側の投影型表示装置は、サーバ側から受信した座標データを基に、ベクトルデータに変換し（ステップＳ１３）、その変換したベクトルデータを更に画像化して、ビットマップ画像に変換する（ステップＳ１４）。次に、第１の実施の形態で説明した図２に示す透明化処理を行い（ステップＳ１５）、スクリーン上の最前面に表示する（ステップＳ１６）。また、貼り付け処理を実行する場合は（ステップＳ１８）、ビットマップ画像に変換した画像を、文書データに貼り付けることになる（ステップＳ１９）。
【０１３５】
（第２の通信方法）
次に、図１４を参照しながら、第２の通信方法について説明する。
なお、サーバ側の投影型表示装置は、サーバ側の投影型表示装置自身、及び、ネットワークを介して接続された外部のライアント側の投影型表示装置に対して、デジタイザにより取得した座標データを基に変換したベクトルデータをクライアント側に送信する機能を有し、クライアント側の投影型表示装置は、サーバ側の投影型表示装置から受信したベクトルデータを画像化し、サーバ側の投影型表示装置で開く文書データに貼り付ける機能と、第１の実施の形態で説明した図２の示す原理を用いて、スクリーン上の最前面に、半透明にして重ね合わせて表示する機能と、を有する。なお、図１４に示す、第２の通信方法は、図１３に示す第１の通信方法において、サーバ側の投影型表示装置において、デジタイザから取得した座標データを基に、ベクトルデータに変換し（ステップＳ２１）、そのベクトルデータをクライアント側の投影型表示装置に送信することになる（ステップＳ２２）。
【０１３６】
（第３の通信方法）
次に、図１５を参照しながら、第３の通信方法について説明する。
なお、サーバ側の投影型表示装置は、サーバ側の投影型表示装置自身、及び、ネットワークを介して接続された外部のライアント側の投影型表示装置に対して、デジタイザにより取得した座標データを基にベクトルデータに変換し、更に、画像化したビットマップ画像をクライアント側に送信する機能を有し、クライアント側の投影型表示装置は、サーバ側の投影型表示装置から受信したビットマップ画像を、サーバ側の投影型表示装置で開く文書データに貼り付ける機能と、第１の実施の形態で説明した図２に示す原理を用いて、スクリーン上の最前面に、半透明にして重ね合わせて表示する機能と、を有する。なお、図１５に示す、第３の通信方法は、図１３に示す第１の通信方法において、サーバ側の投影型表示装置において、デジタイザから取得した座標データを基に、ベクトルデータに変換し（ステップＳ３１）、更に、ベクトルデータを基に、画像化し（ステップＳ３２）、その画像化したビットマップ画像をクライアント側の投影型表示装置に送信することになる（ステップＳ３３）。なお、後述する第１１の実施の形態から第１５の実施の形態は、第２通信方法であるベクトルデータによりコミュニケーションシステムの処理動作を説明するが、第１の通信方法や、第３の通信方法を用いることも可能である。また、文書データに貼り付けるときには、第３の通信方法を用いるなど、複数の通信方法を適宜組み合わせることも可能である。また、クライアント側の投影型表示装置は、サーバ側の投影型表示装置を判別し、選択的にスクリーン上に表示する機能や、選択的に特定のサーバ側の投影型表示装置からの書き込み画像を文書データに貼り付ける機能を付加することも可能である。
【０１３７】
（第１１の実施の形態）
次に、第１１の実施の形態について説明する。
第１１の実施の形態におけるコミュニケーションシステムは、投影型表示装置の具備する情報処理手段は、スクリーン上に表示する画面データの一部または全部を、ネットワークを介して接続される外部の投影型表示装置に送信する画面共有サーバ機能と、外部の投影型表示装置から受信した画面データをスクリーン上に表示する画面共有クライアント機能と、により、共通の画面をスクリーン上に表示することが可能な画面共有機能を有して構成される。
【０１３８】
そして、サーバとして機能する１台の投影型表示装置は、サーバとして機能する投影型表示装置自身が起動しているアプリケーションによりスクリーン上に表示している文書データの画像に対して、クライアントとして機能する少なくとも１台以上の、投影型表示装置のデジタイザからネットワークを介して受信した３つのうちいずれかの手書きデータ、及び、サーバとして機能する投影型表示装置自身の手書きデータを、時系列変化する画像列、もしくは映像データに変換して、スクリーン上に表示している文書データの画像に対して、所定の透明度において、重ねて表示し、且つ、その表示画面である共有画面データを、画面共有サーバ機能により、クライアント側の投影型表示装置に送信する。一方、クライアント側の投影型表示装置は、サーバ側の投影型表示装置から受信した共有画面データを画面共有クライアント機能によりスクリーン上に表示することを特徴とするものである。
【０１３９】
このように、第１１の実施の形態におけるコミュニケーションシステムは、複数の手書きデータを画像化したものを、サーバとして機能する投影型表示装置の画面共有サーバ機能を用いて画面共有を行うことにより、通信量を軽減することが可能となる。また、複数の投影型表示装置から正確に書き込み内容を、元の文書データに貼り付けることが可能となり、コミュニケーションの正確度が向上することになる。
【０１４０】
次に、図１６に示す第１１の実施の形態におけるコミュニケーションシステムの処理動作について説明する。なお、以下の番号は、図面での処理動作の番号を示唆するものである。
【０１４１】
（サーバとして機能する投影型表示装置の処理動作）
１．全クライアント側のベクトルデータを受信し、サーバ側と全クライアント側とのベクトルデータを描画した画像を半透明にして重ねた画面をスクリーン上に表示する。また、サーバ自身の書き込みデータを画像化して文書データに貼付ける。また、任意のクライアント側からの書き込みデータを画像化して文書データに貼付ける。
２．サーバ側と全クライアント側とのベクトルデータを描画した画像を半透明にして重ねた画面を画面共有し、その共有画面データを全クライアント側に送信する。
【０１４２】
（クライアントとして機能する投影型表示装置の処理動作）
１．クライアント側のデジタイザにより取得した座標データをベクトルデータに変換し、その変換したベクトルデータをサーバ側に送信する。
２．サーバ側の共有画面データを受信し、その受信したサーバ側の共有画面データをスクリーン上に表示する。
【０１４３】
（第１２の実施の形態）
次に、第１２の実施の形態について説明する。
第１２の実施の形態におけるコミュニケーションシステムは、投影型表示装置は、スクリーン上の同一領域を照明するよう光学系が設計された、２台のプロジェクタを有して構成され、投影型表示装置の具備する情報処理手段は、２台のプロジェクタに対して、別々のビデオ信号を送信し、且つ、スクリーン上に表示する画面データの一部または全部を、ネットワークを介して接続された外部の投影型表示装置に送信する画面共有サーバ機能と、外部の投影型表示装置から受信した画面データをスクリーン上に表示する画面共有クライアント機能と、により、共通の画面データをスクリーン上に表示することが可能な画面共有機能を有して構成される。
【０１４４】
なお、サーバとして機能する１台の投影型表示装置は、スクリーン上の同一領域を照明するよう光学系が設計された、２台のプロジェクタを有して構成され、その投影型表示装置の具備する情報処理手段は、２台のプロジェクタに対して、別々のビデオ信号を送信する。
【０１４５】
そして、サーバとして機能する投影型表示装置の具備する第１のプロジェクタでは、サーバとして機能する投影型表示装置自身が起動しているアプリケーションによりスクリーン上に表示している文書データの画面をスクリーン上に投影すると共に、画面共有サーバ機能により、共有画面データをクライアント側の投影型表示装置に送信し、第２のプロジェクタでは、クライアントとして機能する１台の投影型表示装置のデジタイザからネットワークを介して受信した３つのうちいずれかの手書きデータ、及び、サーバ自身の手書きデータを、時系列変化する画像列、もしくは、映像データに変換してスクリーン上に投影する。一方、クライアント側の投影型表示装置は、第１のプロジェクタでは、サーバとして機能する投影型表示装置から受信した共有画面データを、画面共有クライアント機能を用いてスクリーン上に投影し、第２のプロジェクタでは、サーバ側の投影型表示装置から受信した３つのうちいずれかの手書きデータ、及び、サーバとして機能する投影型表示装置自身の手書きデータを、時系列変化する画像列、もしくは映像データに変換して投影することを特徴とするものである。
【０１４６】
このように、第１２の実施の形態におけるコミュニケーションシステムは、サーバとして機能する投影型表示装置において、手書きデータを画像化したものを、画面共有サーバ機能により画面共有を行う際、プロジェクタを２台有して構成することで、サーバとして機能する投影型表示装置において、画面共有の処理の負荷を軽減し、スムーズな画面共有が可能となる。
【０１４７】
次に、図１７に示す第１２の実施の形態におけるコミュニケーションシステムの処理動作について説明する。なお、以下の番号は、図面での処理動作の番号を示唆するものである。
【０１４８】
（サーバとして機能する投影型表示装置の処理動作）
１．全クライアント側のベクトルデータを受信し、サーバ側と全クライアント側とのベクトルデータを描画した画像を第２のプロジェクタでスクリーン上に表示する。
２．任意のクライアント側から受信した書き込み内容を画像化して文書データに貼付ける。また、サーバ自身の書き込み内容を画像化して文書データに貼付ける。そして、文書画面を第１のプロジェクタでスクリーン上に表示する。また、文書画面を画面共有し、その共有画面データを全クライアント側に送信する。
３．サーバ側のデジタイザにより取得した座標データをベクトルデータに変換し、その変換したベクトルデータを全クライアント側に送信する。
【０１４９】
（クライアントとして機能する投影型表示装置の処理動作）
１．クライアント側のデジタイザで取得した座標データをベクトルデータに変換し、その変換したベクトルデータをサーバ側に送信する。
２．サーバ側の共有画面データを受信し、その受信したサーバ側の共有画面データを第１のプロジェクタでスクリーン上に表示する。
３．サーバ側のベクトルデータを受信し（他のクライアント側のベクトルデータを受信し）、サーバ側と全クライアント側とのベクトルデータを描画した画像データを第２のプロジェクタでスクリーン上に表示する。
【０１５０】
（第１３の実施の形態）
次に、第１３の実施の形態について説明する。
第１３の実施の形態におけるコミュニケーションシステムは、投影型表示装置の具備する情報処理手段は、スクリーン上に表示する画面データの一部または全部を、ネットワークを介して接続される外部の投影型表示装置に送信する画面共有サーバ機能と、外部の投影型表示装置から受信した画面データをスクリーン上に表示する画面共有クライアント機能と、により、共通の画面データをスクリーン上に表示することが可能な画面共有機能を有して構成される。
【０１５１】
サーバとして機能する１台の投影型表示装置は、スクリーン上の同一領域を照明するよう光学系が設計された、２台のプロジェクタを有して構成され、投影型表示装置の具備する情報処理手段は、２台のプロジェクタに対して、別々のビデオ信号を送信する。
【０１５２】
なお、第１のプロジェクタでは、サーバとして機能する投影型表示装置自身が起動しているアプリケーションによりスクリーン上に表示している文書データの画面をスクリーン上に投影すると共に、画面共有サーバ機能により、クライアント側の投影型表示装置に送信し、第２のプロジェクタでは、クライアントとして機能する１台の、投影型表示装置のデジタイザからネットワークを介して受信した３つのうちいずれかの手書きデータ、及び、サーバとして機能する投影型表示装置自身のデジタイザから得られる手書きデータを、時系列変化する画像列、もしくは、映像データに変換してスクリーン上に投影する。一方、クライアント側の投影型表示装置は、サーバとして機能する投影型表示装置から受信した画面データを、画面共有クライアント機能によりスクリーン上に表示すると共に、サーバ側の投影型表示装置から受信した３つのうちいずれかの手書きデータ、及び、サーバとして機能する投影型表示装置のデジタイザから得られる手書きデータを、時系列変化する画像列、もしくは、映像データに変換して、所定の透明度において、重ねてスクリーン上に表示することを特徴とするものである。
【０１５３】
このように、第１３の実施の形態におけるコミュニケーションシステムは、サーバとして機能する投影型表示装置のみが、２つのプロジェクタを有して構成され、クライアントとして機能する投影型表示装置と通信処理行うコミュニケーションシステムに限定した場合に、第１２の実施の形態におけるコミュニケーションシステムを構成するサーバとして機能する投影型表示装置において、画面共有の処理の負荷が軽減されると共に、クライアントとして機能する投影型表示装置のコストを安価にすることが可能となる。
【０１５４】
次に、図１８に示す第１３の実施の形態におけるコミュニケーションシステムの処理動作について説明する。なお、以下の番号は、図面での処理動作の番号を示唆するものである。
【０１５５】
（サーバとして機能する投影型表示装置の処理動作）
１．全クライアント側のベクトルデータを描画した画像を受信し、全クライアント側のベクトルデータを描画した画像を第２のプロジェクタでスクリーン上表示する。
２．サーバ自身の書き込みデータを画像化して文書データに貼付ける。また、クライアント側の書き込みデータを画像化して文書データに貼付ける。そして、文書画面を、第１のプロジェクタでスクリーン上に表示する。また、文書画面を画面共有し、その共有画面データをクライアント側に送信する。
３．サーバ側のデジタイザで取得した座標データをベクトルデータに変換し、その変換したベクトルデータを全クライアント側に送信する。
【０１５６】
（クライアントとして機能する投影型表示装置の処理動作）
１．クライアント側のデジタイザから取得した座標データをベクトルデータに変換し、その変換したベクトルデータをサーバ側に送信する。
２．３．サーバ側の共有画面データを受信し、また、サーバ側のベクトルデータを受信する。そして、サーバ側から受信した共有画面データに、サーバ側と全クライアント側とのベクトルデータを描画した画像を半透明に重ねた画面をスクリーン上に表示する。
【０１５７】
なお、上記第１３の実施の形態におけるコミュニケーションシステムは、クライアント側の投影型表示装置がプロジェクタを２台持ち、上記の方法を行うことも可能である。
【０１５８】
（第１４の実施の形態）
次に、第１４の実施の形態について説明する。
第１４の実施の形態におけるコミュニケーションシステムは、投影型表示装置の具備する情報処理手段は、スクリーン上に表示する画面データの一部または全部を、ネットワークを介して接続される外部の投影型表示装置に送信する画面共有サーバ機能と、外部の投影型表示装置から受信した画面データをスクリーン上に表示する画面共有クライアント機能と、により、共通の画面データをスクリーン上に表示することが可能な画面共有機能を有して構成される。
【０１５９】
なお、サーバとして機能する１台の投影型表示装置は、プロジェクタと、仮想表示装置と、の計２台の投影装置を有して構成され、それぞれ別々のビデオ信号を送信する。
【０１６０】
そして、サーバとして機能する投影型表示装置の具備するプロジェクタでは、サーバとして機能する投影型表示装置自身が起動しているアプリケーションによりスクリーン上に表示している文書データの画面に対し、クライアントとして機能する１台の投影型表示装置のデジタイザからネットワークを介して受信した３つのうちいずれかの手書きデータ、及び、サーバとして機能する投影型表示装置自身の手書きデータを、時系列変化する画像列、もしくは、映像データに変換して、スクリーン上に表示している文書データの画像に対して、所定の透明度において、重ねて表示し投影し、一方、仮想表示装置は、サーバとして機能する投影型表示装置自身が起動しているアプリケーションによりスクリーン上に表示している文書データの画像の複製データを作成し、その作成した複製データに対して、サーバとして機能する投影型表示装置自身の手書きデータを、時系列変化する画像列、もしくは、映像データに変換して、サーバとして機能する投影型表示装置自身が仮想表示装置で仮想的に表示している文書データの画像に対して、所定の透明度において、重ねて仮想表示し、その仮想表示画面を、画面共有サーバ機能により、クライアント側の投影型表示装置に送信する。一方、クライアント側の投影型表示装置は、サーバから受信した画面データを、画面共有クライアント機能によりスクリーン上に表示すると共に、サーバ側の投影型表示装置のデジタイザから受信した３つのうちいずれかの手書きデータ、及び、サーバとして機能する投影型表示装置自身のデジタイザから得られる手書きデータを、時系列変化する画像列、もしくは、映像データに変換して、所定の透明度において、重ねて表示することを特徴とするものである。
【０１６１】
このように、第１４の実施の形態におけるコミュニケーションシステムは、文書データの画面と、書き込みデータを画像化したものとを重ねた画面データを、画面共有機能を用いて画面共有を行う際に、画面共有サーバ機能の処理負荷を軽減することが可能となり、実際にプロジェクタを用いてスクリーン上に表示している時よりも、高速に画面共有を行うことが可能となり、コミュニケーションが快適になる。
【０１６２】
次に、図１９に示す第１４の実施の形態におけるコミュニケーションシステムの処理動作について説明する。なお、以下の番号は、図面での処理動作の番号を示唆するものである。
【０１６３】
（サーバとして機能する投影型表示装置の処理動作）
１．クライアント側のベクトルデータを受信し、サーバ側のベクトルデータを描画した画像を半透明に重ねた画面をスクリーン上に表示する。また、サーバ自身の書き込みデータを画像化して文書データに貼付ける。また、クライアント側から受信した書き込みデータを画像化して文書データに貼付ける。
２．サーバ側のベクトルデータを描画した画像を半透明に重ねた画面を仮想表示画面で表示する（画面描画データを仮想表示画面に複製する）。その仮想表示画面に、更に、クライアント側のベクトルデータを描画した画像を半透明に重ねた画面データを仮想表示画面で表示する。そして、仮想表示画面を画面共有し、その共有画面データをクライアント側に送信する。
【０１６４】
（クライアントとして機能する投影型表示装置の処理動作）
１．クライアント側の投影型表示装置のデジタイザから取得した座標データをベクトルデータに変換し、その変換したベクトルデータをサーバ側に送信する。
２．サーバ側の共有画面データを受信し、その受信したサーバ側の共有画面データにクライアント側のベクトルデータを描画した画像を半透明に重ねた画面をスクリーン上に表示する。
【０１６５】
（第１５の実施の形態）
次に、第１５の実施の形態について説明する。
第１５の実施の形態におけるコミュニケーションシステムは、投影型表示装置の具備する情報処理手段は、スクリーン上に表示する画面データの一部または全部を、ネットワークを介して接続される外部の投影型表示装置に送信する画面共有サーバ機能と、外部の投影型表示装置から受信した画面データをスクリーン上に表示する画面共有クライアント機能と、により、共通の画面データをスクリーン上に表示することが可能な画面共有機能を有して構成される。
【０１６６】
なお、サーバとして機能する１台の投影型表示装置は、プロジェクタと、仮想表示装置と、の計２台の投影装置を有して構成され、仮想表示装置には、プロジェクタでスクリーン上に投影している画面データと同一の画面データを複製して仮想表示することになる。
【０１６７】
そして、サーバとして機能する投影型表示装置の具備するプロジェクタでは、サーバとして機能する投影型表示装置自身が起動しているアプリケーションによりスクリーン上に表示している文書データの画面に対し、クライアントとして機能する少なくとも１台以上の投影型表示装置のデジタイザから、ネットワークを介して受信した３つのうちいずれかの手書きデータ、及び、サーバとして機能する投影型表示装置自身のデジタイザから得られる手書きデータを、時系列変化する画像列、もしくは映像データに変換して、スクリーン上に表示している文書データの画像に対して、所定の透明度において、重ねて表示し、且つ、その画面データを、画面共有サーバ機能により、クライアント側の投影型表示装置に送信し、一方、仮想表示装置は、プロジェクタによりスクリーン上に表示している画面データと同一の画面データを仮想表示しており、その仮想表示画面を、画面共有サーバ機能により、クライアント側の投影型表示装置に送信する。また、１台のサーバとして機能する投影型表示装置に対して、少なくとも１台以上接続が可能であるクライアント側の投影型表示装置は、サーバとして機能する投影型表示装置から受信した画面データを、画面共有クライアント機能によりスクリーン上に表示することを特徴とするものである。
【０１６８】
このように、第１５の実施の形態におけるコミュニケーションシステムは、サーバとして機能する投影型表示装置が、仮想表示画面で、全ての投影型表示装置から受信した書き込みデータを画像化したものを集約して、重ねて仮想表示したものを画面共有することにより、３台以上の投影型表示装置を用いたコミュニケーションが可能となる。
【０１６９】
次に、図２０に示す第１５の実施の形態におけるコミュニケーションシステムの処理動作について説明する。なお、以下の番号は、図面での処理動作の番号を示唆するものである。
【０１７０】
（サーバとして機能する投影型表示装置の処理動作）
１．全クライアント側のベクトルデータを受信し、サーバ側と全クライアント側とのベクトルデータを描画した画像を半透明に重ねた画面をスクリーン上に表示する。また、サーバ自身の書き込みデータを画像化して文書データに貼付ける。また、任意のクライアント側から受信した書き込みデータを画像化して文書データに貼付ける。
２．サーバ側と全クライアント側とのベクトルデータを描画した画像を半透明に重ねた画面を仮想表示画面で表示する（画面描画データを仮想表示画面に複製する）。そして、仮想表示画面を画面共有し、その共有画面データを全クライアント側に送信する。
【０１７１】
（クライアントとして機能する投影型表示装置の処理動作）
１．クライアント側のデジタイザから得られる座標データをベクトルデータに変換し、その変換したベクトルデータをサーバ側に送信する。
２．サーバ側の共有画面データを受信し、その受信したサーバ側の共有画面データをスクリーン上に表示する。
【０１７２】
なお、上述する実施の形態は、本発明の好適な実施の形態であり、本発明の要旨を逸脱しない範囲内において種々変更実施が可能である。
【０１７３】
【発明の効果】
以上の説明より明らかなように本発明は以下のような効果を奏する。
本発明にかかる投影型表示装置および投影型表示装置を用いた表示画像の遠隔共有方法は、電子文書が表示されている表示画像に対し、書き込み画像を重複して形成可能な表示手段と、表示手段に形成された書き込み画像を光学的に撮影し、該撮影した書き込み画像を電子データに変換する撮像手段と、撮像手段により撮影した書き込み画像の投影位置、及び、大きさを、表示手段に表示する電子文書の表示画像に合わせて調整し、該調整した書き込み画像を、表示手段に表示する電子文書に貼り付ける情報処理手段と、を有する投影型表示装置であって、撮像手段から得られる撮影画像を、ネットワークを介して接続された外部の投影型表示装置に送信する手段と、外部の投影型表示装置から受信した撮影画像を、所定の透明度の撮影画像として、表示手段に表示される電子文書の表示画像に対して重ねて表示する手段と、を有することを特徴する投影型表示装置を、ネットワークを介して複数台接続することで、ネットワークを介して接続された外部の投影型表示装置の具備する表示手段に書き込まれている書き込み画像が、受信側の投影型表示装置の表示手段にリアルタイムで表示されることになり、送信側の投影型表示装置上の表示手段に書き込まれている書き込み内容を把握することが出来ることになる。また、表示手段に半透明に重ねて表示することで、別の表示領域を必要とせず、文書データの編集処理が容易となる。
【図面の簡単な説明】
【図１】第１の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【図２】投影型表示装置のスクリーン上に画像を表示する際に行う画像処理を示すフローチャートである。
【図３】図２に示す画像処理のイメージ図である。
【図４】第２の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【図５】第３の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【図６】第４の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【図７】第５の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【図８】第６の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【図９】第７の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【図１０】第８の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【図１１】第９の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【図１２】第１０の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【図１３】サーバ側のデジタイザで取得するデータをクライアント側に送信する第１の通信方法である、座標データそのものを送信する方法を示す図である。
【図１４】サーバ側のデジタイザで取得するデータをクライアント側に送信する第２の通信方法である、ベクトルデータを送信する方法を示す図である。
【図１５】サーバ側のデジタイザで取得するデータをクライアント側に送信する第３の通信方法である、送信元で座標データを画像化して、画像データとして送信する方法を示す図である。
【図１６】第１１の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【図１７】第１２の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【図１８】第１３の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【図１９】第１４の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【図２０】第１５の実施の形態におけるコミュニケーションシステムの構成、および、そのシステムを構成する投影型表示装置を用いた表示画像の遠隔共有方法を示す図である。
【符号の説明】
１  スクリーン（表示手段）
２  プロジェクタ（投影手段）
３  ビデオカメラ（撮像手段）
４  情報処理手段
５  ビデオエンコーダ
６  貼り合わせソフト
７  文書データ
８  ビデオプレーヤ
９  画面共有
【図１】
2005051446.tif 000003
【図２】
2005051446.tif 000004
【図３】
2005051446.tif 000005
【図４】
2005051446.tif 000006
【図５】
2005051446.tif 000007
【図６】
2005051446.tif 000008
【図７】
2005051446.tif 000009
【図８】
2005051446.tif 000010
【図９】
2005051446.tif 000011
【図１０】
2005051446.tif 000012
【図１１】
2005051446.tif 000013
【図１２】
2005051446.tif 000014
【図１３】
2005051446.tif 000015
【図１４】
2005051446.tif 000016
【図１５】
2005051446.tif 000017
【図１６】
2005051446.tif 000018
【図１７】
2005051446.tif 000019
【図１８】
2005051446.tif 000020
【図１９】
2005051446.tif 000021
【図２０】
2005051446.tif 000022