(57)【要約】【課題】表示画像等の画像データの加工処理を伝送路の転送レートに合わせ、システム全体としての応答速度を速めた遠隔制御システムを提供する。【解決手段】被制御コンピュータ２と、被制御コンピュータ２に対し入力情報を送信する制御端末１とを有し、被制御コンピュータ２は、制御端末１から送信される入力情報に従って、被制御側表示部１０に表示された表示画像情報を、制御端末１に送信し、制御端末１は、送信される表示画像情報を、制御側表示部７に表示する遠隔制御システムであって、被制御コンピュータ２は、被制御側表示部１０に表示する表示画像情報を、制御端末１の表示能力情報及び制御端末１との通信におけるデータの転送レートに従って加工する表示データ加工部９ｂと、表示データ加工部９ｂが加工した表示画像情報を、制御端末１に送信するサーバ通信部９ｄとを備えた。【選択図】  図１
2004187062.tif 000002
【特許請求の範囲】
【請求項１】
被制御コンピュータと、
被制御コンピュータに通信回線を介して接続されており、被制御コンピュータの表示画像情報を表示する制御側表示手段を具備し、被制御コンピュータに対し入力情報を送信する制御端末と、
を有し、
被制御コンピュータは、制御端末から送信される入力情報に従って、表示画像情報を、制御端末に送信し、
制御端末は、被制御コンピュータから送信される表示画像情報を、前記制御側表示手段に表示する
遠隔制御システムであって、
被制御コンピュータは、表示画像情報を、制御端末の表示能力情報及び制御端末との通信におけるデータの転送レートに従って加工する表示データ加工手段と、
前記表示データ加工手段が加工した表示画像情報を、制御端末に送信するサーバ通信手段と、
を備えていることを特徴とする遠隔制御システム。
【請求項２】
前記表示データ加工手段は、前記転送レートの値に応じて、画像圧縮処理、制御端末の表示能力に応じた減色処理、制御端末の前記制御側表示手段に表示する画像だけを切り出す画像切り出し処理、又は、被制御コンピュータ上の更新領域画像だけを抽出する更新画像抽出処理、若しくは、これらの処理の組み合わせにより、制御端末へ送信する表示画像情報のデータ量が小さくなるように画像データを加工することを特徴とする請求項１記載の遠隔制御システム。
【請求項３】
被制御コンピュータは、制御端末と被制御コンピュータの通信経路に適合する転送レートが予め記憶されたサーバ情報記憶手段を有することを特徴とする請求項１又は２記載の遠隔制御システム。
【請求項４】
制御端末は、
制御端末と被制御コンピュータの通信回線に適合する転送レートが予め記憶された端末情報記憶手段と、
制御端末は、被制御コンピュータへの接続時に前記端末情報記憶手段に記憶された転送レートを前記通信回線を介して被制御コンピュータへ送信する転送レート送信手段と、
を備えたことを特徴とする請求項１又は２記載の遠隔制御システム。
【請求項５】
前記サーバ通信手段は、送信する表示画像情報に送信開始時刻を付与して、制御端末へ送信し、
制御端末は、前記表示画像情報を受信した際に送信開始時刻と表示画像情報の受信が完了した時刻から通信に要した時間を計算して、その計算値に基づき被制御コンピュータへ表示画像情報の加工方法を通知する加工方法指示手段を有することを特徴とする請求項１又は２に記載の遠隔制御システム。
【請求項６】
被制御コンピュータは、表示画像情報を送信する前に、制御端末にデータ送信メッセージを送信するデータ送信メッセージ送信手段を有し、
制御端末は、前記データ送信メッセージを受信すると、応答メッセージを被制御コンピュータへ送信する応答メッセージ返信手段を有し、
前記表示データ加工手段は、前記応答メッセージ返信手段からの応答メッセージを受信すると、前記データ送信メッセージ送信手段がデータ送信メッセージを送信してから応答メッセージが返信されるまでの時間を計測し、この時間とメッセージサイズから転送レートを計算、この転送レートに合わせて、表示画像情報の加工方法を決定し、表示画像情報を加工すること
を特徴とする請求項１又は２に記載の遠隔制御システム。
【請求項７】
前記表示データ加工手段は、前記サーバ通信手段から伝送路に関する再送情報を取得し、伝送路でのデータ通信中にデータ再送が発生している場合、データ量が少なくなる加工方式を採用して、表示画像情報の加工を行うことを特徴とする請求項１又は２に記載の遠隔制御システム。
【請求項８】
表示画像情報を表示する被制御側表示手段を具備し、通信回線を介して制御端末から入力される表示画像送信要求に対して、表示画像情報を送信する被制御コンピュータにおいて、
表示画像情報を制御端末の表示手段の表示能力情報及び制御端末との通信におけるデータの転送レートに従って加工する表示データ加工手段と、
前記表示データ加工手段が加工した表示画像情報を、制御端末に送信するサーバ通信手段と、
を備えていることを特徴とする被制御コンピュータ。
【請求項９】
前記表示データ加工手段は、前記転送レートの値に応じて、画像圧縮処理、制御端末の表示能力に応じた減色処理、制御端末の表示手段に表示する画像だけを切り出す画像切り出し処理、又は、被制御コンピュータ上の更新領域画像だけを抽出する更新画像抽出処理、若しくは、これらの処理の組み合わせにより、制御端末へ送信する表示画像情報のデータ量が小さくなるように画像データを加工することを特徴とする請求項８記載の被制御コンピュータ。
【請求項１０】
制御端末と被制御コンピュータの通信経路に合わせて、前記転送レートが予め記憶されたサーバ情報記憶手段を有することを特徴とする請求項８又は９記載の被制御コンピュータ。
【請求項１１】
前記サーバ通信手段は、送信する表示画像情報に送信開始時刻を付与して、制御端末へ送信し、
前記表示データ加工手段は、制御端末が、受信した前記表示画像情報に基づいて、送信開始時刻と表示画像情報の受信が完了した時刻から通信に要した時間を計算し、その計算値に基づき被制御コンピュータへ表示画像情報の加工方法を通知した場合において、通知された加工方法に従って、前記被制御側表示手段に表示する表示画像情報を加工すること
を特徴とする請求項８又は９記載の被制御コンピュータ。
【請求項１２】
前記サーバ通信手段が表示画像情報を送信する前に、前記制御端末にデータ送信メッセージを送信するデータ送信メッセージ送信手段を有し、
前記表示データ加工手段は、制御端末が、受信した前記データ送信メッセージに対して応答メッセージを被制御コンピュータへ送信した場合において、前記データ送信メッセージ送信手段が前記データ送信メッセージを送信してから制御端末から応答メッセージが返信されるまでの時間を計測し、この時間とメッセージサイズから転送レートを計算、この転送レートに合わせて、表示画像情報の加工方法を決定し、表示画像情報を加工すること
を特徴とする請求項８又は９記載の被制御コンピュータ。
【請求項１３】
前記表示データ加工手段は、前記サーバ通信手段から伝送路に関する再送情報を取得し、伝送路でのデータ通信中にデータ再送が発生している場合、データ量が少なくなる加工方式を採用して、表示画像情報の加工を行うことを特徴とする請求項８又は９に記載の被制御コンピュータ。
【請求項１４】
表示画像情報を表示する被制御側表示手段を具備する被制御コンピュータに通信回線を介して接続されており、被制御コンピュータから送信される表示画像情報を前記制御側表示手段に表示する制御側表示手段を具備している制御端末であって、
制御端末と被制御コンピュータの通信回線に適合する転送レートが予め記憶された端末情報記憶手段と、
被制御コンピュータへの接続時に前記端末通信手段を介して前記端末情報記憶手段に記憶された転送レートを被制御コンピュータへ送信する転送レート送信手段と、
を備えたことを特徴とする制御端末。
【請求項１５】
表示画像情報を表示する被制御側表示手段を具備する被制御コンピュータに通信回線を介して接続されており、被制御コンピュータから送信される表示画像情報を前記制御側表示手段に表示する制御側表示手段を具備している制御端末であって、
被制御コンピュータが、表示画像情報とともに送信開始時刻を送信した場合において、前記表示画像情報を受信した際に送信開始時刻と表示画像情報の受信が完了した時刻から通信に要した時間を計算し、その計算値に基づき被制御コンピュータへ表示画像情報の加工方法を通知する加工方法指示手段
を備えていることを特徴とする制御端末。
【請求項１６】
表示画像情報を表示する被制御側表示手段を具備する被制御コンピュータに通信回線を介して接続されており、被制御コンピュータから送信される表示画像情報を前記制御側表示手段に表示する制御側表示手段を具備している制御端末であって、
被制御コンピュータが、表示画像情報を送信する前に送信するデータ送信メッセージを受信した場合において、被制御コンピュータに対して応答メッセージを送信する応答メッセージ返信手段
を備えていることを特徴とする制御端末。
【請求項１７】
被制御コンピュータと、被制御コンピュータに通信回線を介して接続されており、被制御コンピュータの表示画像情報を表示する制御側表示手段を具備し、被制御コンピュータに対し入力情報を送信する制御端末とを有し、被制御コンピュータは、制御端末から送信される入力情報に従って、表示画像情報を、制御端末に送信し、制御端末は、被制御コンピュータから送信される表示画像情報を、前記制御側表示手段に表示する遠隔制御システムの画像転送方法であって、
被制御コンピュータが、表示画像情報を、制御端末の表示能力情報及び制御端末との通信におけるデータの転送レートに従って加工する表示データ加工ステップと、
加工された表示画像情報を、制御端末に送信するサーバ通信ステップと、
を備えていることを特徴とする遠隔制御システムの画像転送方法。
【請求項１８】
前記表示データ加工ステップにおいては、
前記転送レートの値に応じて、画像圧縮処理、制御端末の表示能力に応じた減色処理、制御端末の前記制御側表示手段に表示する画像だけを切り出す画像切り出し処理、又は、被制御コンピュータ上の更新領域画像だけを抽出する更新画像抽出処理、若しくは、これらの組み合わせにより、制御端末へ送信する表示画像情報のデータ量が小さくなるように画像データを加工することを特徴とする請求項１７記載の遠隔制御システムの画像転送方法。
【請求項１９】
制御端末と被制御コンピュータの通信経路に合わせて、被制御コンピュータに内蔵されたサーバ情報記憶手段に前記転送レートを記憶するステップを有し、
前記表示データ加工ステップでは、前記サーバ情報記憶手段に予め記憶された転送レートを参照すること
を特徴とする請求項１７又は１８記載の遠隔制御システムの画像転送方法。
【請求項２０】
制御端末と被制御コンピュータの通信経路に合わせて、制御端末に内蔵された端末情報記憶手段に前記転送レートを記憶するステップと、
前記端末通信手段を介して被制御コンピュータへの接続時に送信するステップと、
を有することを特徴とする請求項１７又は１８記載の遠隔制御システムの画像転送方法。
【請求項２１】
被制御コンピュータが、送信開始時刻を付与した表示画像情報を制御端末へ送信するステップと、
制御端末が、前記表示画像情報を受信した際に送信開始時刻と表示画像情報の受信が完了した時刻から通信に要した時間を計算して、その計算値に基づき被制御コンピュータへ表示画像情報の加工方法を通知するステップと、
を有することを特徴とする請求項１７又は１８記載の遠隔制御システムの画像転送方法。
【請求項２２】
被制御コンピュータが、送信開始メッセージを送信するステップと、
制御端末が、前記送信開始メッセージ受信すると、開始メッセージが到着したことを被制御コンピュータへ応答メッセージを送信するステップと、
被制御コンピュータが、前記応答メッセージを受信すると、前記送信開始メッセージを送信してから前記応答メッセージを受信するまでの時間とこれらのメッセージのサイズから転送レートを計算する転送レート計算ステップと、
を有することを特徴とする請求項１７又は１８記載の遠隔制御システムの画像転送方法。
【請求項２３】
前記表示データ加工ステップにおいて、被制御コンピュータは、伝送路に関する再送情報を取得し、伝送路でのデータ通信中にデータ再送が発生している場合、表示画像情報のデータ量が少なくなる加工を行い、再送が発生しない場合、表示画像情報のデータ量が多くなる加工を行うことを特徴とする請求項１７又は１８記載の遠隔制御システムの画像転送方法。
【請求項２４】
請求項１７乃至２３のいずれか一に記載の遠隔制御システムの画像転送方法を実行するためのプログラムを記憶した記憶媒体。
【請求項２５】
請求項１７乃至２３のいずれか一に記載の遠隔制御システムの画像転送方法を実行するためのプログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、ネットワークを介して入力情報、表示画像情報を送受信して、被制御コンピュータを制御端末から遠隔制御するための遠隔制御技術に関するものである。
【０００２】
【従来の技術】
従来、コンピュータの遠隔制御システムとしては、被制御コンピュータから制御端末へ被制御コンピュータの表示画面を送信し、また、制御端末から被制御コンピュータへ被制御コンピュータに入力される入力情報を送信することで遠隔操作を実現するシステムが知られている（例えば特許文献１参照）。
【０００３】
しかし、このシステムでは、被制御コンピュータの画像情報を制御端末に転送する必要がある。そのため、ネットワークを介して送受信される転送データ量が多く、被制御コンピュータの表示画像、表示画面等の情報（以下、「画像データ」という。）を伝送するための伝送路の転送レートが、遠隔操作時の応答速度に大きな影響を与える。
【０００４】
そこで、転送データ量を削減して、伝送時間を短縮することを目的とし、被制御コンピュータが、転送する画像データを加工、すなわち、制御端末内の更新領域の画像のみを送信したり、画像の圧縮、画像の減色、制御端末のディスプレイサイズの画像を切り出し等を行うことにより転送する画像データのデータ量を削減する遠隔制御システムが考案されている。
【０００５】
【特許文献１】
特開平５−１２２４２４号公報
【０００６】
【発明が解決しようとする課題】
しかしながら、上述の従来の技術において、例えば、更新領域の画像のみを送信する方式では、被制御コンピュータ上でＷｉｎｄｏｗｓ（Ｒ）（登録商標）やＵＮＩＸ（Ｒ）等のオペレーティング・システム（ＯＳ）が動作している場合に、被制御コンピュータの画面のサイズに近いサイズのウィンドウを制御端末からの遠隔操作によって移動した場合、結局、被制御コンピュータの表示画面情報の殆ど全てを被制御コンピュータから制御端末に送信することとなる。そのため、転送する画像データのデータ量削減による効果は得られない。一方で、ウィンドウを移動する場合には、もとのウィンドウに対して更新されるウィンドウ内の領域を検索する等の付加的な処理を行う必要がある。従って、被制御コンピュータの画面のサイズに近いサイズのウィンドウを送信するような場合には、単に表示画面全体の情報を転送する場合に比べると、かえって処理効率が低下する。
【０００７】
また、上記従来の技術で述べた、被制御コンピュータの表示画像の圧縮画像を送信する方式では、被制御コンピュータ側では送信する表示画像を圧縮する必要があり、制御端末側では受信した圧縮画像を伸張する処理を行う必要がある。そのため、これらの圧縮・伸長処理に要する処理時間により、遠隔操作時の応答速度の低下を招く恐れがある。
【０００８】
特に、昨今のコンピュータ、例えば、個人向携帯情報端末（ＰＤＡ：Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔ）、ハンドヘルド・パソコン（ｈａｎｄｈｅｌｄ  ＰＣ）、携帯電話（尚、一般には携帯電話はコンピュータの部類には入らないが、ほぼコンピュータに近い動作環境を実現できているという意味で、本明細書では広くコンピュータに含まれるものとする。）等は、現在のところ、依然としてデスクトップ・パソコンに比較するとデータ処理能力は劣る。そのため、これらのデータ処理能力の低い制御端末での伸張処理に要する時間が、表示画像を圧縮したことにより短縮されるデータ転送時間の削減時間よりも大きくなり、結果的に遠隔制御システム全体としての応答速度の低下を招く可能性がある。
【０００９】
さらに、被制御コンピュータと制御端末との通信に用いられる伝送路が、被制御コンピュータの表示画像の画像データを高速に伝送するのに十分な帯域を確保できる場合には、被制御コンピュータの表示画像の圧縮により短縮されるデータ転送時間の削減量はごくわずかなものとなる。そのため、結局は表示画像の圧縮や伸張に要する時間によって、遠隔制御システム全体としての応答速度が決まることとなる。従って、結果的に遠隔制御システム全体としての応答速度の低下を招く恐れがある。
【００１０】
また、上記従来の技術で述べた、被制御コンピュータ側で制御端末に転送する表示画像の画像データを加工する方式でも、同様に、加工に要する処理時間が加工した結果短縮される伝送時間より増大する可能性がある。従って、結果的に遠隔制御システム全体としての応答速度の低下を招く恐れがある。
【００１１】
すなわち、遠隔制御システムのデータ処理速度を高速化しようとすると、被制御コンピュータ及び制御端末において表示画像情報の伝送時間を短縮する処理を行うために費やされる処理時間と、その処理の結果短縮される伝送時間の短縮時間との差を考えた場合に、常に短縮時間が処理時間よりも大きくなること（すなわち、処理時間から短縮時間を差し引いた値が負となること）が望ましい。しかしながら、上述のように、従来の遠隔制御システムでは、必ずしもそのようにはなっていない。
【００１２】
そこで、本発明の目的は、伝送する表示画像等の画像データの加工処理を伝送路の転送レートに合わせて行うことで、システム全体としての応答速度を速めた遠隔制御システム及びその画像転送方法を提供することにある。すなわち、被制御コンピュータの表示画像等の画像データを送信するのに十分な程度に転送レートが高い伝送路では、上記のような画像データの伝送時間を短縮するための付加処理は行わず、また、転送レートの低い伝送路においては、より効果的な画像データの伝送のために画像データの加工処理を施すことで、システム全体としての応答速度を高速化することができる遠隔制御システム及びその画像転送方法を提供することにある。
【００１３】
また、本発明の目的は、上記遠隔制御システムに使用する被制御コンピュータ及び制御端末を提供することを目的とする。
【００１４】
【課題を解決するための手段】
上記課題を解決するため、本発明に係る遠隔制御システムは、被制御コンピュータと、被制御コンピュータに通信回線を介して接続されており、被制御コンピュータの表示画像情報を表示する制御側表示手段を具備し、被制御コンピュータに対し入力情報を送信する制御端末とを有し、被制御コンピュータは、制御端末から送信される入力情報に従って、表示画像情報を、制御端末に送信し、制御端末は、被制御コンピュータから送信される表示画像情報を、前記制御側表示手段に表示する遠隔制御システムであって、被制御コンピュータは、表示画像情報を、制御端末の表示能力情報及び制御端末との通信におけるデータの転送レートに従って加工する表示データ加工手段と、前記表示データ加工手段が加工した表示画像情報を、制御端末に送信するサーバ通信手段とを備えていることを特徴とするものである。
【００１５】
これにより、表示画像情報の加工処理に施される処理時間と、表示画像情報を送信する通信時間、並びに制御端末において、加工された表示画像情報を復元するための処理時間のバランスを考慮した、効率的な遠隔操作システムが実現できる。
【００１６】
【発明の実施の形態】
本発明の請求項１に記載の発明における遠隔制御システムは、被制御コンピュータと、被制御コンピュータに通信回線を介して接続されており、被制御コンピュータの表示画像情報を表示する制御側表示手段を具備し、被制御コンピュータに対し入力情報を送信する制御端末とを有し、被制御コンピュータは、制御端末から送信される入力情報に従って、表示画像情報を、制御端末に送信し、制御端末は、被制御コンピュータから送信される表示画像情報を、前記制御側表示手段に表示する遠隔制御システムであって、被制御コンピュータは、表示画像情報を、制御端末の表示能力情報及び制御端末との通信におけるデータの転送レートに従って加工する表示データ加工手段と、前記表示データ加工手段が加工した表示画像情報を、制御端末に送信するサーバ通信手段と、を備えていることを特徴とする。
【００１７】
これにより、表示画像情報の加工処理に施される処理時間と、表示画像情報を送信する通信時間、並びに制御端末において、加工された表示画像情報を復元するための処理時間のバランスを考慮した、効率的な遠隔操作システムが実現できる。
【００１８】
本発明の請求項２に記載の発明は、請求項１の発明において、前記表示データ加工手段は、前記転送レートの値に応じて、画像圧縮処理、制御端末の表示能力に応じた減色処理、制御端末の前記制御側表示手段に表示する画像だけを切り出す画像切り出し処理、又は、被制御コンピュータ上の更新領域画像だけを抽出する更新画像抽出処理、若しくは、これらの処理の組み合わせにより、制御端末へ送信する表示画像情報のデータ量が小さくなるように画像データを加工することを特徴とする。
【００１９】
これにより、各種の加工方法の組み合わせで表示画像情報の加工が行えるため、制御端末との伝送路に応じたより柔軟な加工方式が可能な遠隔制御システムが実現できるという作用を有する。
【００２０】
本発明の請求項３に記載の発明は、請求項１又は２の発明において、被制御コンピュータは、制御端末と被制御コンピュータの通信経路に適合する転送レートが予め記憶されたサーバ情報記憶手段を有することを特徴とする。
【００２１】
これにより、前記画像転送サーバ内でのみ、各種加工方式の選択が行え、制御端末内での処理負荷軽減が行えるという作用を有する。
【００２２】
本発明の請求項４に記載の発明は、請求項１又は２の発明において、制御端末は、制御端末と被制御コンピュータの通信回線に適合する転送レートが予め記憶された端末情報記憶手段と、制御端末は、被制御コンピュータへの接続時に前記端末情報記憶手段に記憶された転送レートを前記通信回線を介して被制御コンピュータへ送信する転送レート送信手段と、を備えたことを特徴とする。
【００２３】
これにより、制御端末が転送レート情報を保持しておけばよく、被制御コンピュータ側で各制御端末の転送レート情報を管理する必要がなくなり、なおかつ、制御端末と画像転送サーバとの通信形態が変わった場合でも制御端末の保持する制御情報のみを変更することにより対応できる、すなわち通信形態の変更に容易に対応が可能となるという作用を有する。
【００２４】
本発明の請求項５に記載の発明は、請求項１又は２の発明において、前記サーバ通信手段は、送信する表示画像情報に送信開始時刻を付与して、制御端末へ送信し、制御端末は、前記表示画像情報を受信した際に送信開始時刻と表示画像情報の受信が完了した時刻から通信に要した時間を計算して、その計算値に基づき被制御コンピュータへ表示画像情報の加工方法を通知する加工方法指示手段を有することを特徴とする。
【００２５】
これにより、制御端末で加工方法の選択が可能となり、制御端末が自身に適した加工方式を選択できるという作用を有する。
【００２６】
本発明の請求項６に記載の発明は、請求項１又は２の発明において、被制御コンピュータは、表示画像情報を送信する前に、制御端末にデータ送信メッセージを送信するデータ送信メッセージ送信手段を有し、制御端末は、前記データ送信メッセージを受信すると、応答メッセージを被制御コンピュータへ送信する応答メッセージ返信手段を有し、前記表示データ加工手段は、前記応答メッセージ返信手段からの応答メッセージを受信すると、前記データ送信メッセージ送信手段がデータ送信メッセージを送信してから応答メッセージが返信されるまでの時間を計測し、この時間とメッセージサイズから転送レートを計算、この転送レートに合わせて、表示画像情報の加工方法を決定し、表示画像情報を加工することを特徴とする。
【００２７】
これにより、実際の通信に要する時間により転送レートを計測できるため、より正確な加工方法の選択が可能となり、通信トラフィックの増大により転送レートが低下した場合にも、低下した転送レートに最適なデータ加工方式の選択が可能となるという作用を有する。
【００２８】
本発明の請求項７に記載の発明は、請求項１又は２の発明において、前記表示データ加工手段は、前記サーバ通信手段から伝送路に関する再送情報を取得し、伝送路でのデータ通信中にデータ再送が発生している場合、データ量が少なくなる加工方式を採用して、表示画像情報の加工を行うことを特徴とする。
【００２９】
これにより、通信トラフィックの状態に応じて、最適な表示画像情報の加工方式の選択が可能となるという作用を有する。
【００３０】
（実施の形態１）
以下、本発明の実施の形態について、図面を参照しながら詳しく説明する。
【００３１】
図１は本発明の実施の形態１における遠隔制御システムの機能ブロック図である。
【００３２】
図１において、本実施の形態における遠隔制御システムは、制御端末１と、制御端末１と通信回線を介して接続された被制御コンピュータ２とを有する。
【００３３】
制御端末１は、入力部３、端末通信部４、端末情報記憶部５、表示情報解析部６、制御側表示部７、制御端末部８、及び転送レート送信部１３を有する。
【００３４】
入力部３は、制御端末１に対してユーザが行う入力を受け付けて端末制御部８に送る。端末通信部４は、制御端末１の表示能力に関する情報及び入力部３から入力された入力情報を被制御コンピュータ２へ送信し、被制御コンピュータ２から表示画像情報を受信する。端末情報記憶部５は、端末通信部４から受信した被制御コンピュータ２の表示画像情報、自身の表示能力情報、並びに、通信路に関する情報を記憶する。表示情報解析部６は、端末情報記憶部５に記憶された表示画像情報を解析する。制御側表示部７は、表示情報解析部６が解析した表示画像情報を表示する。端末制御部８は、制御端末１の動作制御を行う。転送レート送信部１３は、被制御コンピュータ２への接続時に、端末情報記憶部５に記憶された転送レートを通信回線を通じて被制御コンピュータ２に送信する。
【００３５】
被制御コンピュータ２は、画像転送サーバ９、被制御側表示部１０、被制御コンピュータ２にて動作するオペレーティング・システム（以下、「ＯＳ」という。）１１、及び、被制御コンピュータ２のＯＳ１１上で動作するアプリケーション１２を有する。
【００３６】
また、画像転送サーバ９は、表示データ取得部９ａ、表示データ加工部９ｂ、サーバ情報記憶部９ｃ、サーバ通信部９ｄ、入力情報解析部９ｅ、及び、サーバ制御部９ｆを有する。
【００３７】
表示データ取得部９ａは、被制御コンピュータ２に表示された表示画像情報を被制御コンピュータ２の被制御側表示部１０から取得する。表示データ加工部９ｂは、表示データ取得部９ａが取得した被制御コンピュータ２の表示画像情報を、制御端末１の表示能力情報並びに通信路の転送レートにしたがって加工する。サーバ情報記憶部９ｃは、表示データ加工部９ｂが加工した表示画像情報や端末情報、並びに通信路の転送レートを記憶する。サーバ通信部９ｄは、制御端末１の入力情報を受信し、サーバ情報記憶部９ｃに記憶した表示画像情報を制御端末１へ送信する。入力情報解析部９ｅは、サーバ通信部９ｄから受信した入力情報を解析し、ＯＳ１１へ指示要求として発行する。サーバ制御部９ｆは、画像転送サーバ９の動作制御を行う。
【００３８】
図２は本発明の実施の形態１における遠隔制御システムの装置ブロック図である。
【００３９】
図２において、制御端末１及び被制御コンピュータ２は図１と同様のものであり、図２ではこれらの回路ブロックを示している。
【００４０】
制御端末１は、物理的構成として、マウスやタッチパネルなどの入力手段を含むキーボード２０、液晶ディスプレイ（以下、「ＬＣＤ」という。）２１、中央処理装置（以下、「ＣＰＵ」という。）２２、ランダムアクセスメモリ（以下、「ＲＡＭ」という。）２３、リードオンリーメモリ（以下、「ＲＯＭ」という。）２４、コンパクト・ディスク・リード・オンリー・メモリ（以下、「ＣＤ−ＲＯＭ」という。）などの記憶媒体２６、記憶媒体２６を読み取るための読取装置２５、２次記憶装置２７、及び、電話回線やネットワークケーブルなどをとおして外部の回線との接続を行なう通信制御装置２８を有する。
【００４１】
被制御コンピュータ２は、物理的構成として、陰極線管ディスプレイ（以下、「ＣＲＴ」という。）２９、ＣＰＵ３０、ＲＡＭ３１、ＲＯＭ３２、ＣＤ−ＲＯＭなどの記憶媒体３４、記憶媒体３４を読み取るための読取装置３３、２次記憶装置３５、電話回線やネットワークケーブルなどを通して外部の回線との接続を行なう通信制御装置３６を有する。
【００４２】
ここで、図１と図２との対応関係を説明する。
【００４３】
制御端末１において、端末情報記憶部５は、ＲＡＭ２３により実現されている。表示情報解析部６、端末制御部８は、ＲＯＭ２４に記憶されたプログラムを、ＣＰＵ２２が、ＲＡＭ２３、ＲＯＭ２４、２次記憶装置２７、通信制御部２８とデータのやりとりを行いながら実行することにより実現されている。入力部３は、キーボード２０により実現され、制御側表示部７はＬＣＤ２１により実現され、また、端末通信部４は、通信制御装置２２により実現されている。
【００４４】
また、被制御コンピュータ２において、サーバ情報記憶部９ｃは、ＲＡＭ３１により実現されている。ＯＳ１１、アプリケーション１２、表示データ取得部９ａ、表示データ加工部９ｂ、入力情報解析部９ｅ、及びサーバ制御部９ｆは、ＲＯＭ３２に記憶されたプログラムを、ＣＰＵ３０が、ＲＡＭ３１、ＲＯＭ３２、２次記憶装置３５とデータのやりとりを行いながら実行することにより実現されている。また、サーバ通信部９ｄは、通信制御装置３６により実現さている。
【００４５】
尚、本実施の形態では、制御端末１は、ＣＰＵ２２がＲＯＭ２４に記憶されたプログラムを実行する形態としているが、ＣＰＵ２２が実行するプログラムは、読取装置２５を用いて、ＣＤ−ＲＯＭなどの記憶媒体２６に記録されたプログラムを読みとってから実行する形態としてもよい。
【００４６】
また、被制御コンピュータ２においては、ＣＰＵ３０がＲＯＭ３２に記憶されたプログラムを実行する形態にしているが、ＣＰＵ３０が実行するプログラムは、読取装置３３を用い、ＣＤ−ＲＯＭなどの記憶媒体３４に記録されたプログラムを読みとってから実行する形態であっても構わない。更に、ＣＰＵ３０が実行するプログラムは、被制御コンピュータ２が通信回線から受信して記憶し、それを読み出して実行するものであってもよい。
【００４７】
以上のように構成された本実施の形態における遠隔制御システムについて、以下その画像転送方法を図３、図４、図５のフローチャートを参照しながら説明する。
【００４８】
図３は本発明の実施の形態１における制御端末の動作を示すフローチャート、図４は本発明の実施の形態１における画像転送サーバの動作を示すフローチャート、図５は本発明の実施の形態１における画像転送サーバの表示画像加工方法の動作を示すフローチャートである。
【００４９】
図３では、制御端末１を起動して、画像転送サーバ９から被制御コンピュータ２の表示画面の画像情報を受信してＬＣＤ２１へ表示するまでの動作を示す。図４では、画像転送サーバ９が、制御端末１から接続要求を受け、被制御コンピュータ２の表示画像情報を取得、加工し、制御端末１へ送信するまでの動作を示す。また、図５では、図４において、画像転送サーバ９が、通信の転送レートに応じて表示画像情報を加工するまでの動作を示している。
【００５０】
以下、各動作に関して説明する。
【００５１】
まず、ユーザが制御端末１を起動することにより処理が開始される。ユーザが制御端末１の起動後に、ユーザにより入力部３から、接続先のサーバを指定する情報（例えば、通信プロトコルにＴＣＰ／ＩＰを使用している場合はＩＰアドレスとポート番号を指定する情報）が入力されると、端末制御部８は端末通信部４を介して、画像転送サーバ９へ接続要求を発行する（Ｓ１）。尚、本実施の形態では、制御端末１を起動後に、ユーザの指示要求によって、画像転送サーバ９への接続を行うこととしているが、本発明は、この接続方法に限定されるものではなく、制御端末１の起動と同時に所定の画像転送サーバ９への接続を行うような接続形態をとることも可能である。
【００５２】
そして、制御端末１からの接続要求を受信した画像転送サーバ９では、サーバ制御部９ｆがサーバ通信部９ｄを介して、制御端末１からの接続要求を受け、接続を確立する（Ｓ２０）。
【００５３】
次に、制御端末１では、転送レート送信部１３が、端末制御部８が、端末情報記憶部５に記憶された制御端末１の表示能力情報を取得し、端末通信部４を介して送信する（Ｓ２）。
【００５４】
本実施の形態においては、表示能力情報は、解像度と画素情報表示能力情報であるものとする。また、本実施の形態における制御端末１の制御側表示部７の解像度は、ＱＶＧＡ（Ｑｕａｒｔｅｒ  Ｖｉｄｅｏ  Ｇｒａｐｈｉｃｓ  Ａｒｒａｙ）規格（３２０×２４０画素）、画素情報は８ｂｉｔ／ｐｉｘｃｅｌとし、被制御コンピュータ２の被制御側表示部１０の解像度は、ＳＶＧＡ（Ｓｕｐｅｒ  Ｖｉｄｅｏ  Ｇｒａｐｈｉｃｓ  Ａｒｒａｙ）規格（１２８０×１０２４画素）、画素情報はフルカラー表示（２４ｂｉｔ／ｐｉｘｃｅｌ）とされているものとする。
【００５５】
尚、本発明は、解像度及び画素情報は、上述の表現形態に限定するものではなく、例えば、画素情報としてカラーパレット情報や階調情報などを用いても構わない。
【００５６】
このとき、画像転送サーバ９においては、サーバ制御部９ｆが、制御端末１が送信した表示能力情報を、サーバ通信部９ｄを介して受信し、サーバ情報記憶部９ｃへ記憶する（Ｓ２１）。そして、サーバ制御部９ｆが表示データ取得部９ａを起動し、ＯＳ１１に第一の表示画像情報を要求する。ＯＳ１１は、第一の表示画像情報をＲＡＭ３１から取得して、当該第一の表示画像情報を表示データ取得部９ａへ返す。そして、表示データ取得部９ａは、第一の表示画像情報をサーバ情報記憶部９ｃへ記憶する（Ｓ２２）。
【００５７】
尚、本実施の形態では、表示データ取得部９ａが第一の表示画像情報をＯＳ１１に要求した後、ＯＳ１１がＲＡＭ３１から第一の表示画像情報を取得することとしたが、本発明は、この実施の形態に限定されるものではない。例えば、表示データ取得部９ａが、第一の表示画像情報をＲＡＭ３１から直接取り出す構成としても構わない。
【００５８】
次に、表示データ加工部９ｂは、サーバ情報記憶部９ｃへ記憶された第一の表示画像情報を読み出して、制御端末１の通信の転送レートに応じて加工処理する（Ｓ２３）。尚、表示画像情報の加工処理については後述する。尚、サーバ情報記憶部９ｃは、図６に示すような、各制御端末の端末識別子とそれに対する転送レートとが対となったデータ構造を有する転送レートデータテーブルを記憶している。
【００５９】
ここで、ステップＳ２３における表示画像情報の加工処理の内容を、図５を参照しながら説明する。
【００６０】
まず、表示画像情報の加工処理が開始されると、サーバ制御部９ｆがサーバ情報記憶部９ｃに記憶されている、制御端末１と間の通信における転送レートを、所定の閾値（閾値１〜４）と比較する（Ｓ４０、Ｓ４１、Ｓ４２、Ｓ４３）。そして、通信の転送レートが各閾値１〜４より小さければ、それぞれの閾値に対する所定の第一の表示画像情報の加工処理を実施するものとする。
【００６１】
ここで、閾値１〜４は、システム内部に規定された、固定の値である。本実施の形態では、閾値を４段階設け、閾値１が最も転送レートが低く、閾値４が最も転送レート高いもとのし、閾値１＜閾値２＜閾値３＜閾値４の関係が成立しているものとする。尚、本実施の形態では、閾値は４段階にしているが、本発明はこの４段階に限定されるものではなく、さらに細かく閾値を設定してもかまわない。
【００６２】
まず、通信の転送レートを閾値１より小さい場合、すなわち、転送レートが最も低い場合、第一の表示画像情報を、最小サイズとなるように加工するため、ステップＳ４４に進む。そして、全ての加工処理（画像切り出し処理、減色処理、及び更新領域抽出処理）を試みる（Ｓ４４〜Ｓ５０）。
【００６３】
また、通信の転送レートが閾値１以上の場合は、閾値２との比較を、さらに、閾値３、閾値４との比較を順次試行してそれぞれの転送レートに応じた加工処理が実施されることとなる。
【００６４】
そして、最後に、加工された画像は、加工方法の属性が付与され、第２の表示画像情報として、サーバ制御部９ｆにより、サーバ情報記憶部９ｃへ記憶される。
【００６５】
ここで、画像切り出し処理、減色処理、及び更新領域抽出処理のそれぞれの加工処理に関して説明する。
【００６６】
画像切り出し処理（Ｓ４４、Ｓ４５）は、被制御コンピュータ２の被制御側表示部１０の解像度が、制御端末１の制御側表示部７の解像度よりも小さい場合に、表示データ加工部９ｂが制御端末１に表示可能な領域の画像を表示画像から切り出す処理である。
【００６７】
本実施の形態では、上述したように被制御コンピュータ２の被制御側表示部１０の解像度は、ＳＶＧＡ規格（１２８０×１０２４画素）であり、制御端末１の被制御側表示部１０の解像度は、ＱＶＧＡ規格（３２０×２４０画素）である。従って、表示データ加工部９ｂは、制御端末１に表示すべき画像のみを表示画像情報として切り出すことを行う。例えば、図７に示すように、表示データ加工部９ｂは、第一の表示画像情報の最左下からＱＶＧＡサイズの画像を切り出すことを行う。
【００６８】
減色処理（Ｓ４６、Ｓ４７）は、被制御コンピュータ２の被制御側表示部１０の画素情報のサイズ（１ピクセルあたりのビット数）が制御端末１の制御側表示部７の画素情報のサイズより小さい場合に、表示データ加工部９ｂが表示画像内の各画素の画素情報のサイズを制御端末１で表示可能な画素情報のサイズへ変換する処理である。
【００６９】
尚、減色処理には、各種の手法が存在するが、本実施の形態では、この減色処理の方法に限定されるものではない。
【００７０】
更新領域抽出処理（Ｓ４８、Ｓ４９）は、被制御コンピュータ２が過去に制御端末１に送信した表示画像情報と、現在サーバ情報記憶部９ｃに保存している第一の表示画像情報との画像の差異部分を抽出する処理である。
【００７１】
圧縮処理（Ｓ５０）は、第一の表示画像情報のデータ圧縮を行う処理である。尚、圧縮処理には、ＬＺＹ符号を用いた方式、ランレングス方式、ＺＩＰ方式など各種の方式による圧縮処理が存在するが、本発明は、これらの圧縮処理の方式に限定されるものではない。
【００７２】
以上の加工処理が完了すると、サーバ制御部９ｆは、表示データ加工部９ｂにより加工されてサーバ情報記憶部９ｃへ保存されている第二の表示画像情報を、サーバ通信部９ｄを介して制御端末１へ送信する（Ｓ２４）。
【００７３】
このとき、制御端末１においては、端末制御部８が、端末通信部４を介して、第二の表示画像情報を受信し（Ｓ３）、端末情報記憶部５へ記憶する（Ｓ４）。
【００７４】
そして、端末制御部８は、表示情報解析部６を起動する。表示情報解析部６は、被制御コンピュータ２において加工された第２の表示画像情報を、その属性情報として付与された加工方法に基づき解析して画像情報を復元する（Ｓ５）。例えば、圧縮処理が施されている場合、表示情報解析部６は、圧縮の展開処理を行う。
【００７５】
そして、端末制御部８は、表示情報解析部６が解析して復元した画像を、制御側表示部７へ表示する（Ｓ６）。この時の制御端末１の制御側表示部７の様子を図８に示す。
【００７６】
以上のように、制御端末１は、被制御コンピュータ２の表示画像を取得して制御端末１へ表示するわけであるが、ここで、入力部３を介して制御端末１からユーザにより入力が行われた場合、端末制御部８は、その入力を検知し（Ｓ７）、入力情報を、端末通信部４を介して、被制御コンピュータ２へ送信する（Ｓ８）。
【００７７】
ここで、入力部３から入力された入力情報が終了要求である場合には、制御端末１は、全ての処理を終了する（Ｓ９）。
【００７８】
一方、被制御コンピュータ２においては、サーバ制御部９ｆは、サーバ通信部９ｄを介して、制御端末１からの入力情報を受信すると（Ｓ２５）、まず、入力情報解析部９ｅを起動して、入力情報の解析を行う（Ｓ２６）。この際、入力情報が終了要求であれば（Ｓ２７）、サーバ制御部９ｆは、制御端末１との接続を切断し、接続待機状態となる（Ｓ２０）。
【００７９】
ステップＳ２７において、入力情報が終了要求でなければ、サーバ制御部９ｆは、入力情報が表示位置変更要求であるか否かを判断する（Ｓ２８）。ここで、表示位置変更要求であった場合には、ステップＳ２３に戻る。一方、表示位置変更要求ではなかった場合には、サーバ制御部９ｆは、入力情報をＯＳ１１への要求へ変換し、ＯＳ１１へ渡す（Ｓ２９）。
【００８０】
以上示したように、制御端末１から被制御コンピュータ２を遠隔制御する際に、被制御コンピュータ２の表示画像情報を、画像転送サーバ９が、制御端末１の通信の転送レートに応じて最適な方法で加工可能するため、単に無条件に加工する場合に比べ、より通信形態、加工方法のバランスのとれた効率的な遠隔操作システムが実現できる。
【００８１】
（実施の形態２）
実施の形態２では、実施の形態１において、制御端末１と被制御コンピュータ２との間の通信の転送レートを予め被制御コンピュータ２内に記憶しておくのでなく、制御端末１内に記憶しておくこととしたものである。
【００８２】
これにより、例えば、制御端末１と被制御コンピュータ２との間の、通信形態が変更された場合、すなわち、例えば、通信路がＩＥＥＥ８０２．１１ｂからＩＥＥＥ８０２．１１ａへ変更され、データの転送レートが上がった場合などにおいて、制御端末１のみの対応で済むので、被制御コンピュータ２で転送レートの管理が不要となる。
【００８３】
（実施の形態３）
実施の形態３では、実施の形態１において、画像転送サーバ９は、送信する表示画像情報に送信開始時刻を付与して、制御端末１へ送信し、制御端末１は、表示画像情報を受信した際に送信開始時刻と表示画像情報の受信が完了した時刻から通信に要した時間を計算して、その計算値に基づき画像転送サーバ９へ表示画像情報の加工方法を通知することとしたものである。
【００８４】
これにより、制御端末１が自身に適した加工方式を選択可能となる。例えば、通信の転送レートが低く、制御端末１の処理能力が低い場合、制御端末１で加工の復元処理を行うとレスポンスが遅くなることを考慮して、加工処理をより処理負荷が軽いものを指定できるようになる。
【００８５】
（実施の形態４）
実施の形態４では、実施の形態１において、画像転送サーバ９が、表示画像情報を送信する前に、
（１）画像転送サーバ９がデータ送信メッセージを送信する。
【００８６】
（２）制御端末１が、画像転送サーバ９から送信されたデータ送信メッセージを受信する。
【００８７】
（３）制御端末１が、応答メッセージを画像転送サーバ９へ送信する。
【００８８】
（４）画像転送サーバ９が、この制御端末１からの応答メッセージを受信する。
という一連の処理を行い、データ送信メッセージを送信してから応答メッセージが返信されるまでの時間を計測し、この時間とメッセージサイズから転送レートを計算し、この転送レートに合わせて、表示画像情報の加工方法を決定し、表示画像情報を加工することとしたものである。
【００８９】
これにより、実施の形態１乃至２と比較して、実際の通信に要する時間により転送レートを計測できるため、通信のトラフィックを考慮した、より通信状態に最適な加工方法の選択が可能となる。例えば、通信トラフィックの増大により転送レートが低下した場合にも、低下した転送レートに最適なデータ加工方式の選択が可能となる。
【００９０】
（実施の形態５）
実施の形態５では、実施の形態１において、被制御コンピュータ２は、定期的にサーバ通信部９ｄにより伝送路に関する再送情報を取得して、表示画像情報の加工処理に際して、転送レートではなく、この再送の発生頻度を使用することとしたものである。例えば、表示画像情報の加工処理では、伝送路でのデータ通信中にデータ再送が発生している場合、データ量が少なくなる加工方式を、再送が発生しない場合、データ量が多くなる加工方式を採用して、表示画像情報の加工を行うこととしたものである。
【００９１】
これにより、通信トラフィックの状態に応じた、最適な表示画像情報の加工方式の選択が可能となる。
【００９２】
【発明の効果】
以上のように本発明の請求項１記載の遠隔操作システムによれば、被制御コンピュータと、被制御コンピュータに通信回線を介して接続されており、被制御コンピュータの表示画像情報を表示する制御側表示手段を具備し、被制御コンピュータに対し入力情報を送信する制御端末とを有し、被制御コンピュータは、制御端末から送信される入力情報に従って、表示画像情報を、制御端末に送信し、制御端末は、被制御コンピュータから送信される表示画像情報を、前記制御側表示手段に表示する遠隔制御システムであって、被制御コンピュータは、表示画像情報を、制御端末の表示能力情報及び制御端末との通信におけるデータの転送レートに従って加工する表示データ加工手段と、前記表示データ加工手段が加工した表示画像情報を、制御端末に送信するサーバ通信手段とを備えたことにより、制御端末、被制御コンピュータ、通信間の処理時間のバランスを考慮した遠隔操作を行えるという効果が得られる。
【００９３】
請求項２に記載の発明によれば、請求項１の発明において、前記表示データ加工手段は、前記転送レートの値に応じて、画像圧縮処理、制御端末の表示能力に応じた減色処理、制御端末の前記制御側表示手段に表示する画像だけを切り出す画像切り出し処理、又は、被制御コンピュータ上の更新領域画像だけを抽出する更新画像抽出処理、若しくは、これらの処理の組み合わせにより、制御端末へ送信する表示画像情報のデータ量が小さくなるように画像データを加工することにより、伝送路に応じた最適な伝送データの加工が可能な遠隔操作が行えるという効果が得られる。
【００９４】
請求項３に記載の発明によれば、請求項１又は２の発明において、被制御コンピュータは、制御端末と被制御コンピュータの通信経路に適合する転送レートが予め記憶されたサーバ情報記憶手段を有することにより、被制御コンピュータ内でのみ各種加工方式の選択が行え、制御端末の処理負荷軽減が行えるという効果が得られる。
【００９５】
請求項４に記載の発明によれば、請求項１又は２の発明において、制御端末は、制御端末と被制御コンピュータの通信経路に適合する前記転送レートが予め記憶された端末情報記憶手段と、制御端末は、被制御コンピュータへの接続時に前記端末情報記憶手段に記憶された転送レートを前記通信回線を介して被制御コンピュータへ送信する転送レート送信手段と、を備えたことにより、制御端末と被制御コンピュータ間の通信形態が変更された場合、端末の保持する制御情報のみの更新で対応できるという効果が得られる。
【００９６】
請求項５に記載の発明によれば、請求項１又は２の発明において、前記サーバ通信手段は、送信する表示画像情報に送信開始時刻を付与して、制御端末へ送信し、制御端末は、前記表示画像情報を受信した際に送信開始時刻と表示画像情報の受信が完了した時刻から通信に要した時間を計算して、その計算値に基づき被制御コンピュータへ表示画像情報の加工方法を通知する加工方法指示手段を有することにより、制御端末が自身に適した加工方式を選択可能な遠隔操作を実現できるという効果が得られる。
【００９７】
請求項６に記載の発明によれば、請求項１又は２の発明において、被制御コンピュータは、表示画像情報を送信する前に、制御端末にデータ送信メッセージを送信するデータ送信メッセージ送信手段を有し、制御端末は、前記データ送信メッセージを受信すると、応答メッセージを被制御コンピュータへ送信する応答メッセージ返信手段を有し、前記表示データ加工手段は、この制御端末からの応答メッセージを受信すると、データ送信メッセージを送信してから応答メッセージが返信されるまでの時間を計測し、この時間とメッセージサイズから転送レートを計算、この転送レートに合わせて、表示画像情報の加工方法を決定し、表示画像情報を加工することにより、実転送レートの変化に応じて加工方式を柔軟に変更可能な遠隔操作が行えるという効果が得られる。
【００９８】
請求項７に記載の発明によれば、請求項１又は２の発明において、前記表示データ加工手段は、前記サーバ通信手段から伝送路に関する再送情報を取得し、伝送路でのデータ通信中にデータ再送が発生している場合、データ量が少なくなる加工方式を行い、再送が発生しない場合、データ量が多くなる加工方式を採用して、表示画像情報の加工を行うことにより、通信トラフィックの変化状態に応じて最適なデータ加工方式を選択可能な遠隔操作が行えるという効果が得られる。
【図面の簡単な説明】
【図１】本発明の実施の形態１における遠隔制御システムの機能ブロック図
【図２】本発明の実施の形態１における遠隔制御システムの装置ブロック図
【図３】本発明の実施の形態１における制御端末の動作を示すフローチャート
【図４】本発明の実施の形態１における画像転送サーバの動作を示すフローチャート
【図５】本発明の実施の形態１における画像転送サーバの表示画像加工方法の動作を示すフローチャート
【図６】本発明の実施の形態１における被制御コンピュータのサーバ情報記憶部の様子を示す図
【図７】本発明の実施の形態１における被制御コンピュータの画面の様子を示す図
【図８】本発明の実施の形態１における制御端末の様子を示す図
【符号の説明】
１  制御端末
２  被制御コンピュータ
３  入力部
４  端末通信部
５  端末情報記憶部
６  表示情報解析部
７  制御側表示部
８  端末制御部
９  画像転送サーバ
９ａ  表示データ取得部
９ｂ  表示データ加工部
９ｃ  サーバ情報記憶部
９ｄ  サーバ通信部
９ｅ  入力情報解析部
９ｆ  サーバ制御部
１０  被制御側表示部
１１  ＯＳ
１２  アプリケーション
２０  キーボード
２１  ＬＣＤ
２２  ＣＰＵ
２３  ＲＡＭ
２４  ＲＯＭ
２５  読取装置
２６  記憶媒体
２７  ２次記憶装置
２８  通信制御装置
２９  ＣＲＴ
３０  ＣＰＵ
３１  ＲＡＭ
３２  ＲＯＭ
３３  読取装置
３４  記憶媒体
３５  ２次記憶装置
３６  通信制御装置
【図１】
2004187062.tif 000003
【図２】
2004187062.tif 000004
【図３】
2004187062.tif 000005
【図４】
2004187062.tif 000006
【図５】
2004187062.tif 000007
【図６】
2004187062.tif 000008
【図７】
2004187062.tif 000009
【図８】
2004187062.tif 000010