(57)【要約】      （修正有）【課題】文書に対する付加情報を与える場合に、その文書および付加情報を共通に参照する利用者間で異なる言語が使われている場合でも付加情報の内容を正しく伝えるようにする。【解決手段】表示対象を遠隔側装置により表示するため表示対象の情報を遠隔側装置に送信する処理を行うコンピュータを有する遠隔表示システムにおいて、コンピュータは、表示対象に付加して表示するアノテーション情報の言語種別及びアノテーション情報を入力する画面を提供し、この画面により入力されたアノテーション情報の言語種別及びアノテーション情報を関連付けて遠隔側装置に送信する処理を行う。また、コンピュータは、画面から所定の言語種別に対するアノテーション情報が入力されていない場合、入力されたアノテーション情報を翻訳して入力されていないアノテーション情報を生成する。【選択図】図２
2007094857.tif 000002
【特許請求の範囲】
【請求項１】
遠隔端末により指定された表示対象と該表示対象に対応したアノテーション情報を表示装置に表示する制御手段を有する遠隔表示システムにおいて、
前記制御手段は、前記アノテーション情報のうち選択された言語種別に対応するアノテーション情報を前記表示対象とともに前記表示装置に表示することを特徴とする遠隔表示システム。
【請求項２】
被写体を撮像する撮像手段で撮像された撮像画像の情報を遠隔端末に送信すると共に、該遠隔端末でなされた前記撮像画像に基づく指示に応じたアノテーション情報を投影手段により前記被写体に投影する制御手段を有する遠隔指示システムにおいて、
前記制御手段は、前記アノテーション情報のうち選択された言語種別に対応するアノテーション情報を前記投影手段により前記被写体に投影することを特徴とする遠隔表示システム。
【請求項３】
前記遠隔端末は、前記アノテーション情報の表示位置を指定する画面を提供することを特徴とする請求項１又は請求項２に記載の遠隔表示システム。
【請求項４】
前記遠隔端末は、前記アノテーション情報及び前記アノテーション情報の言語種別を入力する画面を提供することを特徴とする請求項１又は請求項２に記載の遠隔表示システム。
【請求項５】
前記言語種別のうち所定の言語種別のアノテーション情報が存在しない場合、他のアノテーション情報を翻訳して前記アノテーション情報を補完する補完手段をさらに有することを特徴とする請求項１又は請求項２に記載の遠隔表示システム。
【請求項６】
遠隔端末により指定された表示対象と該表示対象に対応したアノテーション情報を表示装置に表示する工程を有する遠隔表示方法において、
前記アノテーション情報のうち選択された言語種別に対応するアノテーション情報を前記表示対象と共に前記表示装置に表示することを特徴とする遠隔表示方法。
【請求項７】
被写体を撮像する撮像手段で撮像された撮像画像の情報を遠隔端末に送信すると共に、該遠隔端末でなされた前記撮像画像に基づく指示に応じたアノテーション情報を投影手段により前記被写体に投影する工程を有する遠隔指示方法において、
前記アノテーション情報のうち選択された言語種別に対応するアノテーション情報を前記投影手段により前記被写体に投影することを特徴とする遠隔表示システム。
【請求項８】
前記言語種別のうち所定の言語種別のアノテーション情報が存在しない場合、他のアノテーション情報を翻訳して前記アノテーション情報を補完する工程をさらに有することを特徴とする請求項６又は請求項７に記載の遠隔表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報共有を支援する遠隔表示システム及び遠隔表示方法に関する。
【背景技術】
【０００２】
紙に記録された情報に対してユーザが個別に情報を付加するために紙に直接文字を書き加えたり付箋紙を用いたりすることは、直感的で容易な方法である。近年、文書流通が紙媒体から電子媒体に移行しても同様であり、たとえば電子帳票を起票する際に、電子付箋を付加する方法が提案されている（特許文献１参照）。また、表示画面を工夫して、射出形成機の設定・監視業務に支障を来たさぬよう、オペレータ間で情報伝達を確実に行なう技術が提案されている（特許文献２参照）。
【０００３】
また、計算機ネットワークが普及しテレビ会議環境が利用可能になりつつある今日においては、対話相手の画像と音声に加えて、共同で利用する文書等を同時に見ながらそこに情報を付加することが行われている。この場合、利用される情報の形式や適用対象業務を限定することはできない。この一例として、多様な文書情報を対象に、文書情報とユーザ個別の付加情報を関連付けてデータベースに保存する技術が提案されている（特許文献３参照）。この方法では、ユーザは文書に対して自分以外のユーザが残した付加情報を利用することが可能になり、新たな展開の可能性を得ることができる。
【特許文献１】特開平９−１０２０００号公報
【特許文献２】特開２００４−１６８０３１号公報
【特許文献３】特開２００４−１９９４０６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、製造業の中国および東南アジアへの進出が広く行われている今日では、お互いに相手の言葉に明るくない状況でコミュニケーションを行う機会が多く発生している。この場合、ユーザ間で共有する文書には視覚的に理解しやすい画像などを用いるといった工夫が有用であるが、これに対して、付加情報を言語で与える場合、その付加情報が相手の理解できない言語である場合、付加情報の内容を相手が理解することができなくなってしまう。特に、指示内容を付加情報として与える場合には、その指示が伝わらないという問題が発生する。
【０００５】
そこで、本発明は、上記問題点に鑑みてなされたもので、文書に対する付加情報を与える場合に、その文書および付加情報を共通に参照する利用者間で異なる言語が使われている場合でも付加情報の内容を正しく伝えることができる遠隔表示システム及び遠隔表示方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明は、遠隔端末により指定された表示対象と該表示対象に対応したアノテーション情報を表示装置に表示する制御手段を有する遠隔表示システムにおいて、前記制御手段は、前記アノテーション情報のうち選択された言語種別に対応するアノテーション情報を前記表示対象とともに前記表示装置に表示する。
【０００７】
本発明によれば、表示対象およびアノテーション情報を共通に参照する利用者間で異なる言語が使われている場合でもアノテーション情報の内容を正しく伝えることができる。これによって互いに相手の言語に明るくない話者が文書を見ながら対話を行う際に、相手の付けた指示や注釈を自分の分かる言葉で参照でき、自分の言語で指示や注釈を与えることにより相手側では相手の言語でその内容が表示されるといった文書共有の形態が実現できる。
【０００８】
本発明は、被写体を撮像する撮像手段で撮像された撮像画像の情報を遠隔端末に送信すると共に、該遠隔端末でなされた前記撮像画像に基づく指示に応じたアノテーション情報を投影手段により前記被写体に投影する制御手段を有する遠隔指示システムにおいて、前記制御手段は、前記アノテーション情報のうち選択された言語種別に対応するアノテーション情報を前記投影手段により前記被写体に投影する。本発明によれば、表示対象およびアノテーション情報を共通に参照する利用者間で異なる言語が使われている場合でもアノテーション情報の内容を正しく伝えることができる。
【０００９】
前記遠隔端末は、前記アノテーション情報の表示位置を指定する画面を提供するとよい。これにより画面により指定された位置にアノテーション情報を表示することができ、遠隔地の利用者に対して情報を適切に伝えることができる。前記遠隔端末は、前記アノテーション情報及び前記アノテーション情報の言語種別を入力する画面を提供するとよい。これにより言語種別毎にアノテーション情報を入力できる。
【００１０】
本発明の遠隔表示システムは、前記言語種別のうち所定の言語種別のアノテーション情報が存在しない場合、他のアノテーション情報を翻訳して前記アノテーション情報を補完する補完手段をさらに有する。本発明によれば、入力されていないアノテーション情報があった場合でも適切にアノテーション情報を提供することができる。
【００１１】
本発明は、遠隔端末により指定された表示対象と該表示対象に対応したアノテーション情報を表示装置に表示する工程を有する遠隔表示方法において、前記アノテーション情報のうち選択された言語種別に対応するアノテーション情報を前記表示対象と共に前記表示装置に表示する。本発明によれば、表示対象およびアノテーション情報を共通に参照する利用者間で異なる言語が使われている場合でもアノテーション情報の内容を正しく伝えることができる。これによって互いに相手の言語に明るくない話者が文書を見ながら対話を行う際に、相手の付けた指示や注釈を自分の分かる言葉で参照でき、自分の言語で指示や注釈を与えることにより相手側では相手の言語でその内容が表示されるといった文書共有の形態が実現できる。
【００１２】
本発明は、被写体を撮像する撮像手段で撮像された撮像画像の情報を遠隔端末に送信すると共に、該遠隔端末でなされた前記撮像画像に基づく指示に応じたアノテーション情報を投影手段により前記被写体に投影する工程を有する遠隔指示方法において、前記アノテーション情報のうち選択された言語種別に対応するアノテーション情報を前記投影手段により前記被写体に投影する。本発明によれば、表示対象およびアノテーション情報を共通に参照する利用者間で異なる言語が使われている場合でもアノテーション情報の内容を正しく伝えることができる。
【００１３】
本発明の遠隔表示方法は、前記言語種別のうち所定の言語種別のアノテーション情報が存在しない場合、他のアノテーション情報を翻訳して前記アノテーション情報を補完する工程をさらに有する。本発明によれば、入力されていないアノテーション情報があった場合でも適切にアノテーション情報を提供することができる。
【発明の効果】
【００１４】
本発明によれば、文書に対する付加情報を与える場合に、その文書および付加情報を共通に参照する利用者間で異なる言語が使われている場合でも付加情報の内容を正しく伝えることができる遠隔表示システム及び遠隔表示方法を提供できる。
【発明を実施するための最良の形態】
【００１５】
以下、本発明を実施するための最良の形態について説明する。
【実施例１】
【００１６】
図１は、本発明の実施例１に係る遠隔表示システム１００の全体構成を表す図である。この遠隔表示システム１００は、例えば遠隔テレビ会議システム等に適用されるものである。遠隔表示システム１００は、ローカル側装置２０及び遠隔側装置３０を備えている。ローカル側装置２０は、コンピュータ２１及び表示装置２２を備えている。同様に、遠隔側装置３０は、コンピュータ３１及び表示装置３２を備えている。コンピュータ２１及び３１は、例えば、ＣＰＵ（Central Processing Unit）、ＲＯＭ(Read Only Memory)、ＲＡＭ(Random Access Memory)、ハードディスク装置等を含んで構成され、それぞれ図示しないマウスやキーボード等の入力装置が接続されている。コンピュータ２１および３１は、ネットワーク４０を介して相互に接続されている。
【００１７】
各コンピュータ２１及び３１では、利用者により用いるアノテーション情報の言語種別が選択できるように構成されている。例えば、ローカル側装置２０の利用者が、コンピュータ２１で用いるアノテーション情報の言語として日本語を利用したい場合には、日本語の言語種別をコンピュータ２１に入力することができ、遠隔側装置３０の利用者が、コンピュータ３１でアノテーション情報として用いる言語として中国語を利用したい場合には、中国語の言語種別をコンピュータ３１に入力することができる。
【００１８】
コンピュータ２１は、ローカル側装置２０と遠隔側装置３０との遠隔会議中に、表示対象を遠隔側装置（遠隔端末）３０により表示するため表示対象の情報を遠隔側装置３０に送信する処理を行う。さらに、コンピュータ２１は、表示対象に付加して表示するアノテーション情報（付加情報）の言語種別及びアノテーション情報を入力する画面を提供し、この画面により入力されたアノテーション情報の言語種別及びアノテーション情報を関連付けて遠隔側装置３０に送信する処理を行う。このとき、コンピュータ２１は、画面から所定の言語種別に対するアノテーション情報が入力されていない場合、入力されたアノテーション情報を翻訳して入力されていないアノテーション情報を生成する。さらに、コンピュータ２１は、アノテーション情報の表示位置を指定する画面を提供し、この画面により指定されたアノテーション情報の表示位置の情報をアノテーション情報に関連付けて遠隔側装置３０に送信する。
【００１９】
コンピュータ３１は、ローカル側装置（遠隔端末）２０により指定された表示対象を表示する処理を行う。さらに、コンピュータ３１は、ローカル側装置２０により指定され、表示対象に付加して表示するアノテーション情報を言語種別に対応付けて受信し、このアノテーション情報の中から選択された言語種別に対応するアノテーション情報を表示対象と共に表示するよう描画情報を生成する。これにより、ローカル側装置２０と遠隔側装置３０との間で表示対象を共有することができ、表示装置２２及び３２に表示された表示対象を閲覧しながらローカル側装置２０と遠隔側装置３０との間で遠隔会議を行うことができる。なお、コンピュータ３１は、アノテーション情報の中に選択された言語種別に対応するアノテーション情報が存在しない場合、存在するアノテーション情報を翻訳することにより存在しないアノテーション情報を生成するようにしてもよい。
【００２０】
次に、ローカル側装置２０から表示対象及びアノテーション情報の入力例について説明する。図２はコンピュータ２１が提供するグラフィカルユーザインターフェースを示す図である。コンピュータ２１は、指定した表示対象（携帯電話の画像）を表示するウィンドウ４０２を表示装置２２上に提供する。このウィンドウ４０２には、アノテーション情報入力ボタン４０３が設けられており、ユーザがアノテーション情報入力ボタン４０３をマウス等で押下すると、アノテーション情報の表示位置を指定するブロック４０４及びアノテーション情報入力サブウィンドウ４０５が現れる。ユーザは、マウスを用いてブロック４０４を移動することにより、表示対象に対するアノテーション情報の表示位置を指定することができ、ブロック４０４の位置はコンピュータ２１により監視され、最終的なブロック４０４の位置情報がアノテーション情報として保存される。
【００２１】
サブウィンドウ４０５には言語種別に応じた入力エリア４０６及び４０７が設けられており、表示対象に対する日本語のアノテーション情報を入力エリア４０６に入力でき、表示対象に対する中国語のアノテーション情報を入力エリア４０７に入力できる。コンピュータ２１は、入力エリア４０６及び４０７に表示対象に対するアノテーション情報が入力されると、入力エリア４０６及び４０７に入力された文字列をアノテーション情報の表現値として受け付ける。
【００２２】
コンピュータ２１は、例えばユーザにより入力エリア４０６からアノテーション情報が入力されると、日本語の言語種別である属性値‘jpn’とアノテーション情報の表現値を関連付けて保存し、ユーザにより入力エリア４０７からアノテーション情報が入力されると、中国語の言語種別である属性値‘chn’とアノテーション情報の表現値を関連付けて保存する。この時、入力エリア４０６又は４０７のアノテーション情報は、空欄のままでも良く、この場合は、コンピュータ２１は、自動翻訳機能を起動し、対応するアノテーション情報を生成し補完する。なお、コンピュータ２１は、入力エリア４０６又は４０７へのアノテーション情報の入力段階で自動翻訳機能を起動するようにしてもよい。
【００２３】
図３は、図２のグラフィカルユーザインターフェースより入力された表示対象およびアノテーション情報のデータ構造を示す図である。以下において、日本語の“高価”は中国語では“用大的”と同義であるものとする。参照符号３０１は画像からなる表示対象、３０２はアノテーション情報をそれぞれ示している。アノテーション情報３０２は、表現値と言語種別を表す属性値の対を１組以上保持している。アノテーション情報３０２は、参照符号３０３で示す表示対象の識別子「id：tag001」、参照符号３０４及び３０５で示すアノテーション情報の要素「elem」、アノテーション情報の表示位置３１０、表示位置からの矢印３１１を要素として保持している。
【００２４】
要素３０４は、属性（attrib）３０６に日本語の言語種別として属性値‘jpn’を取り、表現３０７に表現値として言語テキスト“高価”を取る。要素３０５は、属性３０８に中国語の言語種別として属性値‘chn’を取り、表現３０９に表現値として言語テキスト“用大的”を取る。コンピュータ２１は、表示対象の識別子３０３により、表示対象及びアノテーション情報を関連付けている。ここで、コンピュータ２１による関連付けの方法としては、ファイルシステム上の同一ディレクトリに保存する方法やデータベースに用いる方法のように、対応関係をデータファイルの外部で管理する方法や、ファイル内部に対応するファイルの名前を記録しておくといった対応関係をデータファイルの内部で管理する方法などが考えられるが、本発明はこの対応付けの実現方法を限定するものではない。
【００２５】
次に、本実施形態に係る遠隔表示システム１００の動作について説明する。図４は本発明の遠隔表示システムの動作フローチャートである。図５（ａ）は、ローカル側装置２０の表示装置２２の表示例、同図（ｂ）は遠隔側装置３２の表示例を示す図である。上述したように、ここでは、ローカル側装置２０のコンピュータ２１では、日本語の言語種別である属性値‘jpn’が選択され、遠隔側装置３０のコンピュータ３１では、中国語の言語種別である属性値‘chn’が選択されているものとする。
【００２６】
まず、コンピュータ２１は、ユーザから表示対象を表示させるコマンドを受け付けると、表示対象の指示を受け付け（ステップＳ１０１）、図２に示したように、ウィンドウ４０２を表示装置２２上に提供する。そして、ユーザがウィンドウ４０２のアノテーション情報入力ボタン４０３をマウス等で押下すると、アノテーション情報入力サブウィンドウ４０５が現れる。コンピュータ２１は、例えばユーザにより入力エリア４０６からアノテーション情報として「高価」が入力されると、日本語の言語種別である属性値‘jpn’とアノテーション情報の表現値「高価」を関連付けて保存し、ユーザにより入力エリア４０７からアノテーション情報「用大的」が入力されると、中国語の言語種別である属性値‘chn’とアノテーション情報の表現値「用大的」を関連付けて保存する（ステップＳ１０２、Ｓ１０３）。
【００２７】
次に、コンピュータ２１は、ユーザによって、入力エリア４０６又は４０７にアノテーション情報が入力されず、指定された言語属性に対応する表現値が存在しない場合には、翻訳処理を実行し（ステップＳ１０４）、ユーザによって選択されたアノテーション情報のうち他の属性値と表現値の組を取り出し、取り出した表現値として保持されている言語テキストを入力されていない入力エリア４０６又は４０７の言語種別へ翻訳を行い、アノテーション情報を生成する。
【００２８】
たとえば、コンピュータ２１は、日本語の言語種別を持ったアノテーション情報「高価」が入力エリア４０６に入力され、中国語の言語種別を持ったアノテーション情報が入力エリア４０７に入力されなかった場合、入力エリア４０６に入力された日本語の言語種別のアノテーション情報を中国語に翻訳し、中国語の言語種別を持ったアノテーション情報「用大的」を生成し、生成したアノテーション情報を中国語の言語種別である属性値‘chn’に関連付けて保存する。
【００２９】
そして、コンピュータ２１は、図２に示した表示対象の情報及びアノテーション情報を遠隔側装置３０へ送信する（ステップＳ１０５）。そして、コンピュータ２１は、表示処理を行い描画情報を生成し、図５（ａ）に示すように、日本語のテキスト“高価”（参照符号６０１）を表示対象に対応付けて表示し、コンピュータ３１は、表示処理を行い描画情報を生成し、図５（ｂ）に示すように、中国語のテキスト“用大的”（参照符号６０２）を表示対象に対応付けて表示する（ステップＳ１０６）。
【００３０】
以上、本実施形態によれば、アノテーション情報のうち利用者により選択された言語種別に対応するアノテーション情報を表示対象とともに表示装置に表示することで、表示対象およびアノテーション情報を共通に参照する利用者間で異なる言語が使われている場合でもアノテーション情報の内容を正しく伝えることができる。
【実施例２】
【００３１】
次に、本発明の実施例２について説明する。図６は、本発明の実施例２に係る遠隔指示システムの構成図である。この遠隔指示システム７００は、図６に示すように、被写体側装置７１０及び遠隔端末８００等を備えており、被写体側装置７１０と遠隔端末８００はネットワーク１０００により相互に通信可能に接続されている。尚、図６においては、遠隔端末８００を一台のみ示しているが、複数の遠隔端末８００をネットワーク１０００を通じて被写体側装置７１０の後述するサーバ７５０へ接続可能である。
【００３２】
被写体側装置７１０は、撮像手段としてのビデオカメラ７２０、照明装置７３０、投影手段としてのプロジェクタ７４０、制御手段としてのサーバ７５０、ハーフミラー７６０及び相対位置変更手段としての回転ステージ７７０等から構成されている。ビデオカメラ７２０は、例えばＣＣＤカメラで構成され、回転ステージ７７０上に置かれた被写体９００を撮像する。その撮像画像の情報はサーバ７５０に取り込まれる。尚、ビデオカメラ７２０は、ハーフミラー７６０を透過した画像を撮像する。
【００３３】
プロジェクタ７４０は、液晶プロジェクタ等で構成され、遠隔端末８００でなされた撮像画像に基づく指示に応じたアノテーション画像を被写体９００に投影する。またプロジェクタ７４０は、その光学系が、ハーフミラー７６０によりビデオカメラ７２０と光学的な主点が略一致するように配置されている。このプロジェクタ７４０は、サーバ７５０から送信されたアノテーション画像をその光学系を通じハーフミラー７６０を介して被写体９００へ投影する。プロジェクタ７４０からのアノテーション画像は、ハーフミラー７６０で反射して被写体９００へ投影される。尚、アノテーション画像には、線、文字、図形等のあらゆる形態の画像が含まれる。
【００３４】
回転ステージ７７０は、サーバ７５０により制御され、その上面に置かれた被写体９００を回動させることにより、ビデオカメラ７２０及びプロジェクタ７４０に対する被写体９００の位置を変更する。サーバ７５０は、ビデオカメラ７２０、プロジェクタ７４０、回転ステージ７７０の動作を制御すると共に、ネットワーク１０００を介して遠隔端末８００との間で各種情報を授受する。また、サーバ７５０は、ビデオカメラ７２０が撮像した撮像画像を遠隔端末８００へ送信すると共に、遠隔端末８００でなされた撮像画像に基づく指示に応じたアノテーション画像をプロジェクタ７４０により被写体９００へ投影させる。また、サーバ７５０は、回転ステージ７７０による被写体９００の回動（移動）に合わせてプロジェクタ７４０の被写体９００に対するアノテーション画像の投影位置を変更する制御を行う。
【００３５】
遠隔端末８００は、液晶表示装置及びＣＲＴ等からなる表示装置８１０、ネットワーク１０００に接続されたコンピュータ８２０、コンピュータ８２０に接続されたポインティングデバイス（マウス）８３０等から構成されている。表示装置８１０は、その表示画面に被写体側装置７１０から送信される画像を表示する。ポインティングデバイス８３０は、撮像画像が表示された表示画面においてポインタで各種ボタン等を操作することにより、被写体９００へ投影するアノテーション画像に関する指示を形成すると共に、回転ステージ７７０の回動による被写体９００の回動を指示するのに用いられる。
【００３６】
次に、上記構成の遠隔指示システムの動作について説明する。図７は被写体側装置のサーバ７５０における処理の一例を示すフローチャートである。図７に示すように、被写体側装置側のサーバ７５０では、ビデオカメラ７２０の撮像画像の取り込みを開始し（ステップＳ２０１）、遠隔端末９００のコンピュータ８２０から接続要求があるかを判断する（ステップＳ２０２）。そして、コンピュータ８２０からの接続要求がある場合には、ビデオカメラ７２０の撮像画像をネットワーク１０００を通じて遠隔端末８００のコンピュータ８２０へ伝送する（ステップＳ２０３）。
【００３７】
次いで、サーバ７５０は、コンピュータ８２０から制御信号の送信があるか否かを判断する（ステップＳ２０４）。この制御信号は、アノテーション画像の描画に関する情報である描画情報、及び回転ステージ７７０を回転させるための位置制御のための信号である。サーバ７５０は、上記の制御信号を受信した場合には、その信号の内容に応じて制御信号処理をする（ステップＳ２０５）。
【００３８】
一方、サーバ７５０は、上記の制御信号を受信しない場合には、コンピュータ８２０から切断要求があるかを判断し（ステップＳ２０６）、切断要求が無い場合には、ステップＳ３に戻って新たな撮像画像をネットワーク１０００を通じて遠隔端末８００のコンピュータ８２０へ伝送し、切断要求があった場合には、ビデオカメラ７２０の撮像画像の伝送を停止する（ステップＳ２０７）。そして、サーバ７５０は、処理の終了要求があるかを判断し（ステップＳ２０８）、終了要求がない場合には、ステップＳ２０２に戻って上記の処理を繰り返し、終了要求があった場合には処理を終了する。
【００３９】
次に、遠隔端末８００の動作について説明する。図８は遠隔端末側の操作の一例を説明するための図である。図９は遠隔端末のコンピュータにおける像形成における処理の一例を示すフローチャートである。先ず、図９に示すように、遠隔端末８００のコンピュータ８２０は、サーバ７５０に対して接続要求を行う（ステップＳ３０１）。次いで、コンピュータ８２０は、接続が完了した後、例えば、図８に示すように、被写体側のサーバ５０から伝送される撮像画像を表示装置８１０の表示画面８１１に表示する（ステップＳ３０２）。
【００４０】
次いで、コンピュータ８２０は、表示装置８１０の表示画面８１１に表示した撮像画像に対する操作者からの注目領域の指示があるかを判断し（ステップＳ３０３）、注目領域の指示がある場合には、指示に応じた処理を行う（ステップＳ３０４）。具体的には、遠隔端末８００の操作者は、図８に示すような表示装置８１０の表示画面８１１の画像を見ながら、表示されている画像にアノテーション画像を投影したい領域がある場合には、ポインティングデバイス８３０を操作して表示画面８１１上のポインタＰｔを移動させながら注目領域を指示する。
注目領域は、アノテーション画像を投影する投影位置を規定する領域である。
【００４１】
そして、コンピュータ８２０は、ステップＳ３０３において、注目領域の指示がない（アノテーション画像に関する指示がない）場合には、遠隔端末８００の操作者により、被写体９００の回転の指示がされると判断して被写体９００の回転に関する処理をする（ステップＳ３０４）。次いで、コンピュータ８２０は、被写体９００の回転に関する処理により得られた回転量情報（移動量情報）等を被写体側のサーバ８５０へ伝送する（ステップＳ３０５）。これにより、回転ステージ８７０が回転されて被写体９００の回転位置が変更し、遠隔端末８００の表示装置８１０には新たな撮像画像が表示される（ステップＳ３０２）。
【００４２】
さらに、コンピュータ８２０は、被写体９００に付加して表示するアノテーション情報の言語種別及びアノテーション情報を入力するサブウィンドウ（画面）４０５を表示画面８１１内に提供する（ステップＳ３０６）。サブウィンドウ４０５には言語種別に応じた入力エリア４０６及び４０７が設けられている。表示対象に対する日本語のアノテーション情報を入力エリア４０６に入力することができる。また、表示対象に対する中国語のアノテーション情報を入力エリア４０７に入力することができる。コンピュータ８２０は、入力エリア４０６及び４０７に表示対象に対するアノテーションが入力されると、入力エリア４０６及び４０７に入力された文字列をアノテーション情報の表現値として受け付ける。
【００４３】
コンピュータ８２０は、例えばユーザにより入力エリア４０６からアノテーション情報が入力されると、日本語の言語種別である属性値‘jpn’とアノテーション情報の表現値を関連付けて保存し、ユーザにより入力エリア４０７からアノテーション情報が入力されると、中国語の言語種別である属性値‘chn’とアノテーション情報の表現値を関連付けて保存する。この時、入力エリア４０６および４０７のアノテーション情報のいずれかは、空欄のままでも良い。この場合は、コンピュータ８２０は、内部に保持する辞書データベースを参照して、画面４０５から言語種別に対するアノテーション情報が入力されていないと判断した場合、入力されたアノテーション情報を翻訳して入力されていないアノテーション情報を生成し補完する（ステップＳ３０７）。なお、コンピュータ８２０は、入力エリア４０６又は４０７へのアノテーション情報の入力段階で自動翻訳機能を起動するようにしてもよい。
【００４４】
そして、コンピュータ８２０は、この画面８１１により入力されたアノテーション情報の言語種別及び入力されたアノテーション情報を関連付けて被被写体側装置７１０に送信する処理を行う（ステップＳ３０８）。次いで、コンピュータ８２０は、遠隔端末８００でなされたビデオカメラ７２０の撮像画像に基づく操作者による指示が完了したかを判断し、（ステップＳ３０９）、終了した場合には、サーバ７５０に対して切断要求を行い（ステップＳ３１０）、処理を終了する。遠隔端末８００の操作者による指示操作が終了していない場合には、ステップＳ３０２に戻って上記の処理を繰り返す。
【００４５】
そして、被写体側装置７１０のサーバ７５０は、アノテーション情報を言語種別に対応付けて受信し、このアノテーション情報の中から選択された言語種別に対応するアノテーション情報を表示対象と共に表示するよう描画情報を生成する。このとき、サーバ７５０は、アノテーション情報の中に選択された言語種別に対応するアノテーション情報が存在しない場合、存在するアノテーション情報を翻訳することにより存在しないアノテーション情報を生成して補完する。そして、サーバ７５０は、アノテーション画像を被写体９００に投影する。
【００４６】
本実施例によれば、サーバ７５０は、アノテーション情報のうち利用者により選択された言語種別に対応するアノテーション情報をプロジェクタ７４０により被写体９００に投影することで、表示対象およびアノテーション情報を共通に参照する利用者間で異なる言語が使われている場合でもアノテーション情報の内容を正しく伝えることができる。
【００４７】
以上本発明の好ましい実施形態について詳述したが、本発明は係る特定の実施例に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形、変更が可能である。
【図面の簡単な説明】
【００４８】
【図１】本発明の第１実施例に係る遠隔表示システムの全体構成を表す図である。
【図２】コンピュータが提供するグラフィカルユーザインターフェースを示す図である。
【図３】図２のグラフィカルユーザインターフェースより入力された表示対象およびアノテーション情報のデータ構造を示す図である。
【図４】本発明の遠隔表示システムの動作フローチャートである。
【図５】（ａ）は、ローカル側装置の表示装置の表示例、（ｂ）は遠隔側装置の表示例を示す図である。
【図６】本発明の実施例２に係る遠隔指示システムの構成図である。
【図７】被写体側装置のサーバにおける処理の一例を示すフローチャートである。
【図８】遠隔端末側の操作の一例を説明するための図である。
【図９】遠隔端末のコンピュータにおける像形成における処理の一例を示すフローチャートである。
【符号の説明】
【００４９】
１００  遠隔表示システム  
２０  ローカル側装置
２１  コンピュータ
２２  表示装置
３０  遠隔側装置
３１  コンピュータ
３２  表示装置
７００  遠隔指示システム
７１０  被写体側装置
８００  遠隔端末
【図１】
2007094857.tif 000003
【図２】
2007094857.tif 000004
【図３】
2007094857.tif 000005
【図４】
2007094857.tif 000006
【図５】
2007094857.tif 000007
【図６】
2007094857.tif 000008
【図７】
2007094857.tif 000009
【図８】
2007094857.tif 000010
【図９】
2007094857.tif 000011