Source: https://patents.google.com/patent/JP2005301908A/en
Timestamp: 2019-11-18 04:24:46
Document Index: 212567885

Matched Legal Cases: ['art 20', 'art 18', 'art 2', 'art 17', 'art 21', 'art 12', 'art 16', 'art 13', 'art 11']

JP2005301908A - Information apparatus remote control system - Google Patents
Information apparatus remote control system Download PDF
JP2005301908A
JP2005301908A JP2004120706A JP2004120706A JP2005301908A JP 2005301908 A JP2005301908 A JP 2005301908A JP 2004120706 A JP2004120706 A JP 2004120706A JP 2004120706 A JP2004120706 A JP 2004120706A JP 2005301908 A JP2005301908 A JP 2005301908A
JP2004120706A
まみ子 高橋
2004-04-15 Application filed by Toshiba Corp, 株式会社東芝 filed Critical Toshiba Corp
2004-04-15 Priority to JP2004120706A priority Critical patent/JP2005301908A/en
2005-10-27 Publication of JP2005301908A publication Critical patent/JP2005301908A/en
<P>PROBLEM TO BE SOLVED: To provide an information apparatus remote control system which improves the convenience of users at the time of remote control by making a specific information apparatus be remotely controlled by another information apparatus through a network. <P>SOLUTION: The information apparatus remote control system 1 has the information apparatus 3 of an operated side and the information apparatus 2 of an operating side. The information apparatus 3 of the operated side comprises; a view information storage part 20 wherein view information about a view area associated with a window is stored; a picture information processing part 18 which generates an image to be displayed as an initial state on an operating-side display part 2a in accordance with view information; a communication part 17; and a control information processing part 21 for operating applications. The information apparatus of the operating side comprises; a communication part 12, a view area storage part 16 wherein view information is stored; a picture information processing part 13 which displays images in a plurality of display areas in order of display levels in accordance with the view information; and a control information processing part 11 which transmits operation information of applications to the information apparatus 3 of the operated side. <P>COPYRIGHT: (C)2006,JPO&NCIPI
本発明は、ネットワークを経由して遠隔地のパーソナルコンピュータはじめとするマルチウィンドウ表示が可能な表示装置を持つ情報機器を他の情報機器を用いて操作する情報機器遠隔操作システムに関する。 The present invention relates to an information equipment remote operating system via a network to operate using other information equipment information device having a multi-window display is a display device capable of a personal computer beginning remote.
近年、インターネット接続が可能な携帯電話や無線ＬＡＮ（Local Area Network）内蔵のＰＤＡ（Personal Digital Assistant）など、ネットワーク接続が可能な小型情報端末が普及してきている。 In recent years, such as the Internet can be connected by mobile phones and wireless LAN (Local Area Network) built-in PDA (Personal Digital Assistant), a network can be connected by a small information terminals have become widespread. また、これらの小型情報端末の表示装置は解像度が高くなり、細かな画像の表示が可能となってきている。 The display device of these small information terminals resolution is increased, it has become possible to display fine images. それに伴い、小型情報端末から遠隔地にあるパソコンなどの機器にネットワークで接続し、操作を行うための製品の開発や研究が進められている。 Along with that, connected by a network from a small information terminal equipment such as a personal computer at a remote location, it has been advanced product development and research for carrying out the operation.
例えば、予めソフトウェアをインストールしたパーソナルコンピュータ（ＰＣ）を、ＷＥＢブラウザが使用可能な携帯電話及びＰＤＡからネットワーク経由で操作する技術がある（例えば非特許文献１参照）。 For example, pre-installed software and a personal computer (PC), WEB browser is operating technology via a network from a mobile phone and PDA available (for example, see Non-Patent Document 1).
また、同様にソフトウェアをあらかじめインストールしたＰＣを特定の言語が使用できるＷＥＢブラウザまたは専用のビューアで操作する技術がある（例えば非特許文献２参照）。 Further, there is a technique to operate similarly in a WEB browser or dedicated viewer that a previously installed a PC can use a particular language software (for example, see Non-Patent Document 2).
さらに、携帯電話とＰＣの間に中継サーバを設け、中継サーバと携帯電話を独自プロトコルで通信するという方法で携帯電話からＰＣを遠隔操作する遠隔操作システムが実現されている（例えば非特許文献３参照）。 Further, the relay server between the mobile phone and PC provided, remote control system for remotely operating the PC from the mobile phone in a way that communicates the mobile phone and the relay server proprietary protocol has been realized (for example, Non-Patent Document 3 reference).
しかし、ソフトウェアをインストールしたＰＣを、ネットワークを介してＷＥＢブラウザ経由で携帯電話やＰＤＡと接続する技術では、画面全体がＨＴＭＬ（HyperText Markup Language）に変換されて被操作側であるＰＣ等の情報機器から操作側である携帯電話やＰＤＡ等の情報機器に送信されるため、操作側の情報機器では、被操作側の情報機器で操作した場合とは異なった表示になるという問題点がある。 However, the installed PC software, in over a network connected to the cellular phone or PDA via a WEB browser technology, the entire screen is converted into HTML (HyperText Markup Language) such as a PC, which is the operated-side information equipment to be transmitted to the information equipment such as a mobile phone or a PDA is an operation side from the operating-side information equipment, there is a problem that a display that is different from the case of operating the information equipment of the operated side.
また、ソフトウェアをあらかじめインストールしたＰＣを特定の言語が使用できるＷＥＢブラウザまたは専用のビューアで操作する技術においては、被操作側の情報機器であるＰＣの画面をそのまま操作側の情報機器に表示することができるが、操作側の情報機器として利用できるのは特定の限られたＯＳ（Operating System；オペレーティングシステム）上で動作するものが対象となっており、携帯電話や一部のＰＤＡなどでは使用することができない。 Further, in the technique to operate the WEB browser or dedicated viewer software can be pre-installed specific language PC is used to be displayed as it is operating-side information equipment PC screen is information equipment of the operated side but it is, can be used as the operating-side information equipment is certain limited OS; has become one that works is targeted on (operating system operating system), used in mobile phones and some PDA it can not be.
さらに、携帯電話とＰＣの間に中継サーバを設けて通信する技術を含めて従来の各種遠隔操作技術においては、小型情報端末等の操作側の情報機器からＰＣ等の被操作側の情報機器への画像情報の移植を行っても操作側の情報機器では被操作側の情報機器の画面の一部のみを表示することになる。 Furthermore, including the technique to communicate by providing a relay server between a mobile phone and PC in various conventional remote control technology, from the information device on the operating side such as a small information terminal to the operated-side information equipment such as a PC, will display only part of the screen of the information device of the operated side in even the operating-side information equipment performs image information of the transplant. このため、被操作側の情報機器がマルチウィンドウ表示が可能な表示装置を持つ情報機器である場合には、操作側の情報機器における画面表示がウィンドウとは関係なく行われ、他のウィンドウを参照する場合には操作側の情報機器において表示画面を上下左右に移動するよう指示する必要が生じる。 Therefore, when the information equipment of the operated side is information equipment having a multi-window display can display, screen display in the operating-side information equipment is performed regardless of the window, see other windows necessary to instruct to move the display screen vertically and horizontally in the operating-side information equipment in the case of results.
つまり、従来の情報機器における遠隔操作技術では操作側の情報機器の表示範囲と被操作側の情報機器におけるウィンドウに関連性がないため、ウィンドウの移動を伴う場合に操作側の情報機器の操作が煩雑となるという問題や、特に小型の情報機器では表示範囲が限られているため、被操作側の情報機器における大きなウィンドウを小型の操作側の情報機器から参照した時に一部しか参照することができないという問題点がある。 That is, in the conventional information remotely operated in the device technology is not relevant to the window in the display range and the operated-side information equipment of the operating-side information equipment, the operation of the operating-side information equipment to be accompanied by movement of the window and a problem that a complicated, especially since the small-sized information devices have limited display range, can refer only part upon reference to the large windows in the information equipment of the operated side from the information device of a small operating side there is a problem that can not be.
このような問題点の他、携帯電話等の情報機器では、ＰＣに通常備えられるマウス等の入力装置が利用できないといった問題やボタンやキーの数が制限されるといった問題がある。 Another such a problem, in the information device such as a mobile phone, there is a problem the number of problems or buttons and keys such input device is not available, such as a mouse, which is usually provided in the PC is limited.
すなわち、表示部が通常のＰＣ等の情報機器のものに比べ小型であり、またハード的な制限を有する携帯電話やＰＤＡ等の情報機器を用いてＰＣ等の情報機器を遠隔操作する場合には、種々の利便性の低下要因が存在する。 That is, when the display unit is small compared to the information equipment such as a conventional PC, also remotely controlling an information device such as a PC by using the information equipment such as a mobile phone or a PDA with a hardware limitation is , there is decrease factors of various convenience.
本発明はかかる従来の事情に対処するためになされたものであり、ネットワークを介して特定の情報機器を他の情報機器から遠隔操作することが可能であり、遠隔操作の際よりユーザの利便性を向上させた情報機器遠隔操作システムを提供することを目的とする。 The present invention has been made to the conventional situations, it is possible to remotely control the specific information equipment from another information equipment via a network, the user's convenience than the time of remote control and to provide information equipment remote operating system having improved.
また、本発明の他の目的は、表示部が通常のＰＣ等の情報機器のものに比べ小型である操作側の情報機器を用いてネットワークを介して他の被操作側の情報機器を遠隔操作ことが可能であり、遠隔操作の際、よりユーザの利便性を向上させ状態で被操作側の情報機器の画面を操作側の情報機器に表示することができるような情報機器遠隔操作システムを提供することである。 Another object of the present invention, the display unit is remotely manipulate information devices other the operated-side via the network using the information equipment compact is operated side compared with the information equipment such as a conventional PC it is possible, during the remote operation, provides information equipment remote operating system that can be displayed more user convenience screen operating-side information equipment information device of the operated side in the state to improve It is to be.
本発明に係る情報機器遠隔操作システムは、上述の目的を達成するために、請求項１に記載したように、ウィンドウを被操作側表示部に表示させてアプリケーションを実行する被操作側の情報機器と、この被操作側の情報機器とネットワークを介して接続可能であり、かつ前記被操作側表示部よりも小型の操作側表示部を有する操作側の情報機器とを備え、前記被操作側の情報機器に、前記被操作側表示部に表示された画面の一部あるいは全範囲を前記操作側表示部に初期状態として表示させる場合における画像の範囲を前記ウィンドウと関連付けたビュー領域として、このビュー領域に関連付けられた所属ウィンドウ、所属ウィンドウの任意の基準位置からの相対的な領域範囲および前記操作側表示部に表示させる際の表示順位をパラメー Information equipment remote operating system according to the present invention, in order to achieve the above object, as described in claim 1, of the operated side to perform the window is displayed on the operated-side display unit application information apparatus When a connectable via the information device and the network of the operated-side, and said an operation side of the information equipment having a small operating-side display unit than the operated-side display unit, of the operated-side the information device, the range of the image as the view area associated with the window when displaying a part or the entire range of the displayed on the operated-side display unit screen as the initial state to the operating-side display unit, the view assigned window associated with the region, the display order of the time of displaying the relative region range and the operating-side display unit from an arbitrary reference position of the assigned window parameters として有するビュー情報を記憶するビュー情報記憶部と、前記ビュー情報に従って前記操作側表示部に初期状態として表示させる画像を生成する画面情報処理部と、この画面情報処理部により生成された画像とともにビュー情報を前記操作側の情報機器に送信し、かつ前記操作側の情報機器から前記アプリケーションの操作情報を受信する通信部と、この通信部により受信された前記アプリケーションの操作情報をオペレーティングシステムに与えて前記アプリケーションを操作する制御情報処理部とを設ける一方、前記操作側の情報機器に、前記被操作側の情報機器から送信された画像およびビュー情報を受信する通信部と、この通信部により受信されたビュー情報を記憶するビュー領域記憶部と、前記通信部により受信された画像の一 View and view information storing unit for storing view information, the and the screen information processing unit for generating an image to be displayed on the operating-side display unit as an initial state, the image generated by this screen information processing unit in accordance with the view information having a transmit information to an information device of the operating side, and a communication unit that receives the operation information of the application from the information device of the operating side, giving operation information of the application received by the communication unit to the operating system while providing a control information processing unit for operating the application, the information device of the operating side, the communication unit that receives the transmitted image and view information from the information device of the operated side, is received by the communication unit a view region storing unit for storing the view information, the received image by the communication unit one あるいは全範囲を前記ビュー領域記憶部に記憶されたビュー情報に従って前記操作側表示部が有する複数の表示領域に表示順位の高い順に表示させる画面情報処理部と、操作部に入力された前記アプリケーションの操作情報を通信部に与えて前記被操作側の情報機器に送信させる制御情報処理部とを設けたことを特徴とするものである。 Alternatively the screen information processing unit for displaying the entire range in the order of high display order to a plurality of display areas in which the operating-side display unit has according to the view the view information stored in the area storage portion, of the application is input to the operation unit the giving operation information to the communication unit is characterized in the provision of the control information processing unit to transmit to the information device of the operated side.
また、本発明に係る情報機器遠隔操作システムは、上述の目的を達成するために、請求項２に記載したように、ウィンドウを被操作側表示部に表示させてアプリケーションを実行し、かつ前記被操作側表示部よりも小型の操作側表示部を有する操作側の情報機器にネットワークを介して接続可能な被操作側の情報機器を備え、前記被操作側の情報機器に、前記被操作側表示部に表示された画面の一部あるいは全範囲を前記操作側表示部に初期状態として表示させる場合における画像の範囲を前記ウィンドウと関連付けたビュー領域として、このビュー領域に関連付けられた所属ウィンドウ、所属ウィンドウの任意の基準位置からの相対的な領域範囲および前記操作側表示部に表示させる際の表示順位をパラメータとして有するビュー情報を記 The information equipment remote operating system according to the present invention, in order to achieve the above object, as described in claim 2, run the application to display the window on the operated-side display unit, and the object an information device of the operated side can be connected via a network to the operating-side information equipment having a small operating-side display unit than the operating-side display unit, the information equipment the operated side, the operated-side display the range of the image as the view area associated with the window in the case where a part or the entire range of a screen displayed on the part to be displayed as an initial state to the operating-side display unit, assigned window associated with this view region, affiliation serial view information having display order when displaying the relative region range and the operating-side display unit from an arbitrary reference position of the window as a parameter するビュー情報記憶部と、前記ビュー情報に従って前記操作側表示部に初期状態として表示させる画像を生成する画面情報処理部と、この画面情報処理部により生成された画像とともにビュー情報を前記操作側の情報機器に送信し、かつ前記操作側の情報機器から前記アプリケーションの操作情報を受信する通信部と、この通信部により受信された前記アプリケーションの操作情報をオペレーティングシステムに与えて前記アプリケーションを操作する制御情報処理部とを設けたことを特徴とするものである。 And view information storage unit that, and the screen information processing unit for generating an image to be displayed as the initial state to the operating-side display unit in accordance with the view information, along with the generated image view information of the operating-side by the screen information processing unit transmitted to the information device, and the communication unit from the operating-side information equipment receives the operation information of the application, control for operating the application by giving operation information received the application to the operating system by the communication unit it is characterized in the provision of the information processing unit.
また、本発明に係る情報機器遠隔操作システムは、上述の目的を達成するために、請求項３に記載したように、ウィンドウを被操作側表示部に表示させてアプリケーションを実行する被操作側の情報機器にネットワークを介して接続可能であり、かつ前記被操作側表示部よりも小型の操作側表示部を有する操作側の情報機器を備え、この操作側の情報機器に、前記被操作側表示部に表示された画面の一部あるいは全範囲を前記操作側表示部に初期状態として表示させる場合における画像の範囲を前記ウィンドウと関連付けたビュー領域として、このビュー領域に関連付けられた所属ウィンドウ、所属ウィンドウの任意の基準位置からの相対的な領域範囲および前記操作側表示部に表示させる際の表示順位をパラメータとして有するビュー情報 The information equipment remote operating system according to the present invention, in order to achieve the above object, as described in claim 3, of the operated side to execute the application to display the window on the operated-side display unit can be connected via a network to an information device, and wherein an information device on the operating side with a small operating-side display unit than the operated-side display unit, the information device of the operating side, the operated-side display the range of the image as the view area associated with the window in the case where a part or the entire range of a screen displayed on the part to be displayed as an initial state to the operating-side display unit, assigned window associated with this view region, affiliation view information having display order when displaying the relative region range and the operating-side display unit from an arbitrary reference position of the window as a parameter 従って前記被操作側の情報機器において生成されて送信された画像および前記ビュー情報を受信する通信部と、この通信部により受信されたビュー情報を記憶するビュー領域記憶部と、前記通信部により受信された画像の一部あるいは全範囲を前記ビュー領域記憶部に記憶されたビュー情報に従って前記操作側表示部が有する複数の表示領域に表示順位の高い順に表示させる画面情報処理部と、操作部に入力された前記アプリケーションの操作情報を通信部に与えて前記被操作側の情報機器に送信させる制御情報処理部とを設けたことを特徴とするものである。 Thus a communication unit that receives the image and the view information transmitted is generated in the operated-side information equipment, and view region storing unit for storing the view information received by the communication unit, received by the communication unit a screen information processing unit for displaying in order of display order to a plurality of display regions included in the operating-side display unit according to the view information has been stored a part or full range of the view region storing unit of the image, the operation unit in which it characterized in that a control information processing unit for giving operation information inputted the application to the communication unit to transmit to the information device of the operated side.
本発明に係る情報機器遠隔操作システムにおいては、よりユーザの利便性を向上させた状態でネットワークを介して特定の情報機器を他の情報機器から遠隔操作することができる。 In the information equipment remote operating system according to the present invention, it is possible to remotely control the specific information equipment from another information equipment via a network in a state in which further improve the user's convenience.
また、本発明に係る情報機器遠隔操作システムにおいては、表示部が通常のＰＣ等の情報機器のものに比べ小型である操作側の情報機器を用いてネットワークを介して他の被操作側の情報機器を遠隔操作ことが可能であり、遠隔操作の際、よりユーザの利便性を向上させ状態で被操作側の情報機器の画面を操作側の情報機器に表示させることができる。 Further, in the information equipment remote operating system according to the present invention, information of the other of the operated-side via the network using the information equipment compact is operated side compared with the information equipment such as a normal display unit of the PC the device is capable remote operation, when the remote control, can be displayed more users of convenience while improving the screen of an information device of the operated-side operating-side information equipment.
本発明に係る情報機器遠隔操作システムの実施の形態について添付図面を参照して説明する。 It will be described with reference to the accompanying drawings showing a preferred embodiment of the information equipment remote operating system according to the present invention.
図１は本発明に係る情報機器遠隔操作システムの実施の形態を示す構成図である。 Figure 1 is a block diagram showing an embodiment of the information equipment remote operating system according to the present invention.
情報機器遠隔操作システム１は、操作側の情報機器の一例としての携帯電話２と、被操作側の情報機器の一例としてのパーソナルコンピュータ（ＰＣ）３とを、ネットワークの一例であるインターネット４を介して互いに通信可能にした構成である。 Information equipment remote operating system 1, via the mobile phone 2 as an example of operating-side information equipment, and a personal computer (PC) 3 serving as an example of the operated-side information equipment, the Internet 4, which is an example of a network it is a configuration that enables communication with each other Te. すなわち、インターネット４には、携帯電話２に情報を送受信する基地局５が接続される。 In other words, the Internet 4, the base station 5 for transmitting and receiving information to the cellular phone 2 is connected.
携帯電話２には操作側表示部２ａが設けられ、ＰＣ３には被操作側表示部３ａが設けられる。 The mobile phone 2 is provided with operating-side display unit 2a, is the operated-side display unit 3a is provided in the PC3. 一般に携帯電話２の操作側表示部２ａは、ＰＣ３の被操作側表示部３ａよりも小さく、ＰＣ３の被操作側表示部３ａに表示された画面をそのまま携帯電話２の操作側表示部２ａに表示させると著しく利便性が低下する。 In general the mobile phone 2 operating-side display unit 2a is smaller than the operated-side display unit 3a of the PC3, display it on the operating-side display unit 2a of the cellular phone 2 the screen displayed on the operated-side display unit 3a of PC3 remarkably convenience decreases when is.
尚、ネットワークはインターネット４に限らずＬＡＮ等のネットワークであってもよく有線、無線を問わない。 The network is not a wired may be a network such as a LAN is not limited to the Internet 4, the radio. また、操作側の情報機器は表示部が携帯電話２やＰＤＡのように移動性を有するもののみならず、操作側表示部２ａが小型のものであれば固定側の情報機器であてもよい。 Also, the information device on the operating side is not only the display unit has a mobility as a mobile phone 2, a PDA, or operating-side display unit 2a may be addressed by the information device of the fixed long as the compact. つまり、被操作側の情報機器を通信可能であれば、無線通信によらず、直接操作側の情報機器をネットワークに接続してもよい。 That is, the communication of the information device of the operated side, if possible, regardless of the wireless communication may be connected to information equipment directly operating side to the network. さらに、携帯電話２およびＰＣ３が常時インターネット４に接続されている必要はなく、使用時にそれぞれインターネット４に接続可能であればよい。 Furthermore, it is not necessary to the mobile phone 2 and PC3 is connected to the Internet 4 all the time, as long can be connected to the Internet 4, respectively, in use.
図２は、図１に示す情報機器遠隔操作システム１の詳細構成図である。 Figure 2 is a detailed block diagram of the information equipment remote operating system 1 illustrated in FIG.
携帯電話２には、操作部１０、制御情報処理部１１、通信部１２、画面情報処理部１３、操作側表示部２ａ、画像展開部１４、表示部角度検知部１５およびビュー領域記憶部１６とが設けられ、ＰＣ３には、通信部１７、画面情報処理部１８、画像圧縮部１９、ビュー情報記憶部２０、制御情報処理部２１、ＯＳ２２、擬似ドライバ２３を有するデバイスドライバ２４、ＶＲＡＭ（Video Random Access Memory）２５、被操作アプリケーション記憶部２６とが設けられる。 The mobile phone 2, the operation unit 10, control information processing unit 11, a communication unit 12, screen information processing unit 13, operating-side display unit 2a, image developing unit 14, a display unit angle detection unit 15 and the view region storing unit 16 are mounted on the PC3, the communication unit 17, screen information processing unit 18, image compression unit 19, view information storing unit 20, control information processing unit 21, OS 22, device driver having a pseudo-driver 23 24, VRAM (Video Random Access memory) 25, is provided with the operated application storing unit 26. 尚、図２において基地局５は省略してある。 The base station 5 in FIG. 2 is omitted.
ＰＣ３の通信部１７は、画面情報処理部１８や制御情報処理部２１から受けた各種情報をネットワークを介して携帯電話２に送信する一方、携帯電話２から各種情報を受信して画面情報処理部１８や制御情報処理部２１に与える機能を有する。 PC3 communication unit 17, while transmitting various information received from the screen information processing unit 18 and the control information processing unit 21 to the cellular phone 2 via the network, the screen information processing unit from the mobile phone 2 receives the various information It has the function of giving to 18 or the control information processing unit 21.
ＰＣ３のビュー情報記憶部２０には、予めＰＣ３の被操作側表示部３ａに表示される画面の全部あるいは一部を携帯電話２の操作側表示部２ａに初期状態として表示させる場合における画像の範囲および画像の相対的な位置を規定するための情報が作成されて保存される。 In PC3 view information storing unit 20, the range of the image when displaying the initial state all or part of a screen displayed in advance PC3 of the operated-side display unit 3a on the operating-side display unit 2a of the cellular phone 2 and information for defining the relative positions of the images are stored is created. 以下、この携帯電話２に表示させるＰＣ３の画面の範囲をビュー領域と、ビュー領域を規定するための情報をビュー情報と称する。 Hereinafter referred to the range of PC3 screen to be displayed on the cellular phone 2 and the view area, the information for defining the view area and view information.
ＰＣ３のＶＲＡＭ２５は、ＰＣ３の被操作側表示部３ａに表示された画像情報を記録するためのメモリであり、画面情報処理部１８は、ビュー情報記憶部２０に記憶されたビュー情報に基づいてＶＲＡＭ２５からデバイスドライバ２４の擬似ドライバ２３を介してＰＣ３の被操作側表示部３ａに表示された画面情報の一部あるいは全範囲を取得する機能、ＶＲＡＭ２５から取得した画像情報を画像圧縮部１９に与えることにより画像情報を圧縮させる機能、圧縮後の画像情報とともにビュー情報を通信部１７に与えて携帯電話２に送信する機能を有する。 VRAM 25 of the PC3 is a memory for recording image information displayed on the operated-side display unit 3a of the PC3, the screen information processing unit 18, based on the view information stored in the view information storage unit 20 VRAM 25 ability to acquire a part or full range of the screen information displayed on the operated-side display unit 3a of the PC3 via the pseudo driver 23 of the device driver 24, to give the obtained image information from the VRAM25 the image compression unit 19 It has a function of transmitting function for compressing image information, together with the image information after compression giving view information to the communication unit 17 to the cellular phone 2 by.
ＰＣ３の画像圧縮部１９は、画面情報処理部１８から受けた画像情報の圧縮を行なって画面情報処理部１８に与える機能を有する。 Image compression unit 19 of PC3 has the function of giving to the screen information processing unit 18 performs a compression of the image information received from the screen information processing unit 18.
ＰＣ３の制御情報処理部２１は、操作対象となるウィンドウの切り換え情報に基づいて操作対象となるウィンドウの表示順位を設定する機能、操作対象となるウィンドウの切り換え情報やウィンドウの表示順位、操作対象となるビュー領域の選択情報等の情報を携帯電話２から通信部１７を介して受信し、ＯＳ２２に与えて操作対象となるウィンドウを切り換える機能、携帯電話２から通信部１７を介して受信したアプリケーションの操作情報をＯＳ２２に与えてアプリケーションの操作を実行する機能を有する。 Control information processing unit 21 of PC3 has a function of setting the window display order to be operated based on the switching information of a window to be operated, switching information or window display order of the window to be operated, and the operation target consisting received via the communication unit 17 information such as selection information of a view region from the mobile phone 2, the function of switching the window to be operated to give the OS 22, the application received through the communication unit 17 from the cellular phone 2 It has a function of executing the operation of the application giving operation information to the OS 22.
そして、制御情報処理部２１は、携帯電話２から受信したウィンドウの切り換え情報等の情報により、携帯電話２において操作対象となるウィンドウがＰＣ３において操作対象となるウィンドウと一致しない場合には、ＰＣ３において操作対象となるウィンドウが携帯電話２において操作対象となるウィンドウとなるようにウィンドウの変更指令をオペレーティングシステムに与えるようにすることもできる。 Then, control information processing unit 21, the information such as the switching information of a window received from the mobile phone 2, when the window in the cellular phone 2 as the operation target does not match the window to be operated in PC3, in PC3 window to be operated is also possible to provide the operating system change command window so that the window to be operated in the cellular phone 2.
ＰＣ３の被操作アプリケーション記憶部２６には、ＰＣ３のＯＣ上で動作する各種アプリケーションプログラムが格納され、被操作アプリケーション記憶部２６からＯＣに読み込まれたアプリケーションプが操作対象の１つとなる。 To the operated application storing unit 26 of the PC3 is stored various application programs that run on PC3 of OC, Apurikeshonpu read to OC from the operated application storing unit 26 is one of the operation target.
一方、携帯電話２の通信部１２は、画面情報処理部１３や制御情報処理部１１から受けた各種情報をネットワークを介してＰＣ３に送信する一方、ＰＣ３から各種情報を受信して画面情報処理部１３や制御情報処理部１１に与える機能を有する。 Meanwhile, the communication unit 12 of the cellular phone 2, while transmitting various information received from the screen information processing unit 13 and the control information processing unit 11 to the PC3 via the network, the screen information processing unit receives various information from PC3 It has the function of giving to 13 or the control information processing unit 11.
携帯電話２の操作部１０は、ユーザの操作によりユーザから各種情報を受け取って制御情報処理部１１に与える機能を有する。 The operating unit 10 of the cellular phone 2 has a function of giving to the control information processing unit 11 receives various information from the user by a user operation.
携帯電話２の画面情報処理部１３は、通信部１２を介してＰＣ３から受信した圧縮画像情報を画像展開部１４に与えて展開させる機能、通信部１２を介してＰＣ３から受信したビュー情報をビュー領域記憶部１６に書き込む機能、ビュー領域記憶部１６に記憶されたビュー情報に基づいて展開後の画像を操作側表示部２ａに与えて所要の表示形式で表示させる機能、ビュー領域記憶部１６に記憶されたビュー情報が更新された場合に通信部１２に与えてＰＣ３に送信する機能を有する。 Screen information processing unit 13 of the cellular phone 2 has a function to expand giving compressed image information received from the PC3 via the communication unit 12 to the image developing unit 14, the view information received from the PC3 via the communication unit 12 Views function of writing to the area storage unit 16, a function of displaying at required display format given to the operating-side display unit 2a of the image after development based on the view information stored in the view region storing unit 16, in the view region storing unit 16 stored view information has the function of transmitting to the PC3 is given to the communication unit 12 when it is updated.
操作側表示部２ａは、画面情報処理部１３から受けた画像を表示させる機能を有する。 Operating-side display unit 2a has a function of displaying the image received from the screen information processing unit 13.
画像展開部１４は、画面情報処理部１３から圧縮された画像情報を受けて、展開処理を行なって画面情報処理部１３に与える機能を有する。 Image expansion section 14 receives the image information compressed from the screen information processing unit 13 has the function of giving to the screen information processing unit 13 performs a deployment process.
ビュー領域記憶部１６には、ＰＣ３から通信部１２を介して受信したビュー情報が保存される。 The view region storing unit 16, the view information received via the communication unit 12 from PC3 are stored.
携帯電話２の制御情報処理部１１は、操作部１０から受けた操作対象となるウィンドウの切り換え情報に基づいて操作対象となるウィンドウの表示順位を設定する機能、操作対象となるウィンドウの切り換え情報やウィンドウの表示順位等の情報をＰＣ３との間で通信部１２を介して送受信する機能を有する。 Control information processing unit 11 of the cellular phone 2 has a function of setting a window display order to be operated based on the switching information of a window to be operated received from the operating unit 10, Ya switching information of a window to be operated It has the function of transmitting and receiving via the communication unit 12 with the information such as window display order PC3.
また、制御情報処理部１１は、操作部１０から受けた操作側表示部２ａの表示形式変更指令等の各種携帯電話２自身の操作に関する操作情報を受けて画面情報処理部１３に操作情報を与える機能、ビュー領域記憶部１６に記憶されたビュー情報を編集する機能、操作部１０から受けたアプリケーションの操作情報を通信部１２に与えてＰＣ３に送信する機能を有する。 Further, the control information processing unit 11 provides the operating information to the screen information processing unit 13 receives the operation information about various mobile phone 2 itself operation display format change command or the like of the operating-side display unit 2a received from the operating unit 10 function, the ability to edit the view information stored in the view region storing unit 16 has a function of transmitting to the PC3 giving operation information of the application received from the operating unit 10 to the communication unit 12.
携帯電話２の表示部角度検知部１５は、携帯電話２の操作側表示部２ａが回転機能等のように向きを変える機能を有する場合に設けられ、操作側表示部２ａの向きが変更せしめられたことを検知して画面情報処理部１３に与える機能を有する。 Display unit angle detection unit 15 of the cellular phone 2, the operating-side display unit 2a of the cellular phone 2 is provided in the case of having a function of changing the direction as such rotation function, it is allowed to change the orientation of the operating-side display unit 2a detecting that was a function of giving to the screen information processing unit 13.
次に、情報機器遠隔操作システム１の作用について説明する。 Next, the operation of the information equipment remote operating system 1.
まず予め、ビュー情報が作成されてＰＣ３のビュー情報記憶部２０に保存される。 First advance and stored in the view information is created in PC3 view information storing unit 20.
図３は、図１に示すＰＣ３の被操作側表示部３ａに表示される画面の一例を示す図である。 Figure 3 is a diagram showing an example of a screen displayed on the operated-side display unit 3a of PC3 shown in Fig.
図３に示すように、ＰＣ３の被操作側表示部３ａには、任意数、例えば３つのウィンドウＷ１、Ｗ２、Ｗ３が表示され、各ウィンドウＷ１、Ｗ２、Ｗ３には文字や図、記号等の情報が表示される。 As shown in FIG. 3, the the operated-side display unit 3a of the PC3, any number, for example, three windows W1, W2, W3 are displayed, each window W1, W2, W3 character or figure, the symbols such information is displayed. そして、各ウィンドウＷ１、Ｗ２、Ｗ３以外の部分には背景が表示される。 Then, in each window W1, W2, W3 other than the partial background is displayed. そして、各ウィンドウＷ１、Ｗ２、Ｗ３を介してそれぞれのウィンドウＷ１、Ｗ２、Ｗ３に対応する各種アプリケーションＡＰ１，ＡＰ２，ＡＰ３が被操作アプリケーション記憶部２６からＯＳ２２に読み込まれて実行され、そのときの被操作側表示部３ａの画面に表示された画像はＶＲＡＭ２５に一時的に記憶される。 Then, various applications AP1, AP2, AP3 corresponding to the respective windows W1, W2, each window via the W3 W1, W2, W3 is loaded into and executed by a OS22 from the operated application storing unit 26, the at that time screen on the display image of the operating-side display unit 3a is temporarily stored in the VRAM 25.
また、各ウィンドウＷ１、Ｗ２、Ｗ３の画像は任意数のペインから構成され、例えばウィンドウＷ３には３つのペインＰ１、Ｐ２、Ｐ３で構成される画像が表示される。 Also, each window W1, W2, W3 of the image is composed of any number of panes, for example, in the window W3 is displayed image is composed of three panes P1, P2, P3. ペインＰ１、Ｐ３は、例えばｅ−ｍａｉｌ（メール）一覧情報やメール本文等の細かな文字情報で構成され、ペインＰ２は、例えば図形情報で構成される。 Pane P1, P3 is, for example, e-mail (e-mail) is composed of a fine character information such as the list of information and mail text, pane P2 is, for example, a graphic information.
そして、このようにＰＣ３の被操作側表示部３ａに表示される画面のうち携帯電話２の操作側表示部２ａに表示させる範囲としてビュー領域が設定される。 The view region is set as a range to be displayed on the operating-side display unit 2a of the cellular phone 2 of this manner a screen displayed on the operated-side display unit 3a of the PC3. このビュー領域は、複数のパラメータを有するビュー情報により定義される。 This view region is defined by view information having multiple parameters.
図４は、図１に示す携帯電話２の操作側表示部２ａに表示させるＰＣ３の画面の範囲であるビュー領域を規定するためのビュー情報の一例を示す図であり、図５は、図４に示すビュー情報により規定されたビュー領域の一例を示す図である。 Figure 4 is a diagram showing an example of the view information for defining the view area in the range of PC3 of a screen displayed on the operating-side display unit 2a of the cellular phone 2 shown in FIG. 1, FIG. 5, FIG. 4 is a diagram illustrating an example of a defined view areas by the view information shown in.
図４に示すようにビュー情報は、複数のパラメータで構成され、ビュー領域はいずれかのウィンドウに関連付けられる。 View information as shown in FIG. 4 is comprised of a plurality of parameters, the view area associated with one of the window. このため、ビュー領域はアプリケーションとも関連付けられる。 Accordingly, the view region also associated with the application. ビュー情報は、少なくとも関連付けられるウィンドウ（所属ウィンドウ）、所属ウィンドウに関連付けられた任意の基準位置からの相対的なビュー領域の領域範囲情報、ビュー領域を携帯電話２の操作側表示部２ａに表示させる際の表示順位をパラメータとしてもつ。 View information is at least associated are windows (assigned window), the region range information of a relative view region from an arbitrary reference position associated with the assigned window, and displays the view region on the operating-side display unit 2a of the cellular phone 2 having a display order of the time as a parameter. このような各パラメータを有するビュー情報には、便宜上識別情報としての識別番号が付される。 The view information having such each parameter, for convenience identification number as identification information is attached.
また、ビュー情報のうちビュー領域の領域範囲情報は、さらに必要数の、例えば４つのサブパラメータ（ｘ，ｙ，ｗ，ｈ）で定義される。 The area range information of a view area of ​​the view information further the required number, for example four sub parameters (x, y, w, h) is defined by. サブパラメータｘは、所属ウィンドウに関連付けられた任意の基準位置、例えば図５において所属ウィンドウの左端からビュー領域の左端までのＰＣ３の距離を、サブパラメータｙは、所属ウィンドウの上端からビュー領域の上端までのＰＣ３の距離をそれぞれ表す。 Sub parameter x, any reference position associated with the assigned window, the PC3 distance from the left edge of the assigned window in FIG. 5, for example to the left edge of the view area, the sub-parameter y is the upper end of the upper end from the view area of ​​the assigned window It represents up to PC3 distance, respectively. また、サブパラメータｗ、ｈは、それぞれ図５においてビュー領域の横幅および高さをそれぞれ表す。 The sub parameter w, h respectively represent the width and height of the view region in FIG. 5, respectively.
ただし、所属ウィンドウに関連付けられる基準位置は、点であっても線であってもよく、また所属ウィンドウ外部であってもよい。 However, the reference associated with the assigned window position may be also line be a point, or may be a assigned window outside. また、領域範囲情報は極座標その他任意の座標系で定義することができる。 The area range information may be defined in polar coordinates any other coordinate system. さらに、ビュー領域のウィンドウの対する相対位置を規定するための基準位置のみならず、ビュー領域も所属ウィンドウ内外を問わず、ＰＣ３の被操作側表示部３ａの範囲内であれば任意に設定することができる。 Furthermore, not only the reference position for defining the relative position against the window of the view region, even view region regardless of the assigned window inside and outside, arbitrarily set to be within the range of the operated-side display unit 3a of PC3 can.
図５において、ビュー情報により規定されたビュー領域を点線で示す。 5 shows a view area that is defined by view information in a dotted line. 例えば、図４および図５の例では、３つのウィンドウＷ１、Ｗ２、Ｗ３に対し、５つのビュー領域Ｖ１、Ｖ２、Ｖ３、Ｖ４、Ｖ５がビュー情報により定義され、識別番号が割り当てられる。 For example, in the example of FIG. 4 and FIG. 5, with respect to three windows W1, W2, W3, 5 single view regions V1, V2, V3, V4, V5 are defined by view information, the identification number is assigned. ビュー領域Ｖ１の所属ウィンドウは、ウィンドウＷ１であり、ビュー領域Ｖ１の領域範囲は、ウィンドウＷ１の左端から５０（任意相対単位）、上端から０の位置をそれぞれ左端、上端とし、横幅が７５、高さが７５であることが分かる。 The assigned window of the view region V1, a window W1, the region range of the view region V1 is left from the left edge 50 of the window W1 (Optional relative units), the position of 0 from the top, respectively, and an upper end, the width is 75, a high Saga it can be seen 75. さらに、ビュー領域Ｖ１の表示順位は４番目である。 Further, the display order of the view region V1 is the fourth.
また、所属ウィンドウをウィンドウＷ３とするビュー領域は、ビュー領域Ｖ３、Ｖ４、Ｖ５の３つである。 Also, the view region to the window W3 of the assigned window is three view region V3, V4, V5. 各ビュー領域Ｖ３、Ｖ４、Ｖ５の表示範囲は、それぞれ（ｘ，ｙ，ｗ，ｈ）＝（５，５，５０，５０）、（６０，１２５，５０，５０）、（０，０，２００，２００）であり、表示順位はそれぞれ１番目、２番目、３番目である。 Display range of the view region V3, V4, V5, respectively (x, y, w, h) = (5,5,50,50), (60,125,50,50), (0,0,200 is 200), the first respectively the display order, the second, a third. このため、図５において、ウィンドウＷ３に所属するビュー領域Ｖ３が最前面に表示されている。 Therefore, in FIG. 5, view region V3 belonging to the window W3 is displayed in the foreground.
このように、単一のウィンドウＷ３に対して複数のビュー領域Ｖ３、Ｖ４、Ｖ５を定義することもできる。 Thus, it is also possible to define a plurality of view region V3, V4, V5 for a single window W3. この際、共通のウィンドウＷ３を所属ウィンドウとするため、ビュー領域Ｖ３、Ｖ４、Ｖ５の表示順位が連続するように１番目、２番目、３番目に設定されている。 At this time, since the common window W3 and assigned window, first as successive display order of the view regions V3, V4, V5, 2 th, are set in the third.
つまり、ビュー領域はビュー情報によりウィンドウないしアプリケーションと関連付けられて、アプリケーションに対応する表示範囲として定義される。 That is, the view area associated with the window or application by the view information, is defined as a display range corresponding to the application. そして、ビュー情報はビュー情報記憶部２０に保存される。 Then, the view information is stored in the view information storage unit 20. このビュー情報の作成および保存により、ユーザの利便性を向上させた携帯電話２からのＰＣ３の遠隔操作が可能となる。 The creation and storage this view information, PC3 of the remote operation from the mobile phone 2 with improved convenience for the user can be performed.
図６は、図１に示す情報機器遠隔操作システム１により、携帯電話２からネットワークを介してＰＣ３を操作する際の流れを示すシーケンス図である。 6, the information equipment remote operating system 1 illustrated in FIG. 1 is a sequence diagram showing the flow when operating the PC3 via the network from the mobile phone 2.
まず、Ｓ１において、ビュー情報記憶部２０に保存されたビュー情報とともに、このビュー情報に基づいて携帯電話２の操作側表示部２ａに表示させる画像情報がＰＣ３から携帯電話２に送信される。 First, in S1, together with the view information stored in the view information storage unit 20, the image information to be displayed on the operating-side display unit 2a of the cellular phone 2 on the basis of this view information is sent to the mobile phone 2 from PC3. このＰＣ３から携帯電話２への画像情報の送信タイミングは、ＰＣ３が起動した際に自動的に送信するようにすることもできるし、ＰＣ３が携帯電話２から画像情報の送信要求を受けた際に送信するようにすることもできる。 Transmission timing of the image information from the PC3 to the mobile phone 2 can either be configured to automatically send when PC3 is started, when PC3 receives the transmission request for image data from the cellular phone 2 it is also possible to send.
すなわち、まず画面情報処理部１８が擬似ドライバ２３を介してＶＲＡＭ２５からＰＣ３の被操作側表示部３ａに表示された画像情報を取得する。 That is, first the screen information processing unit 18 acquires the image information displayed on the operated-side display unit 3a of the VRAM25 via the pseudo driver 23 PC3. さらに、画面情報処理部１８は取得した画像情報を画像圧縮部１９に与え、画像圧縮部１９において圧縮された画像情報が再び画面情報処理部１８に与えられる。 Moreover, the screen information processing unit 18 provides the image information acquired in the image compression unit 19, the image information compressed by the image compression unit 19 is provided to the screen information processing unit 18 again.
そして、画面情報処理部１８は圧縮された画像情報とともにビュー情報記憶部２０から読み込んだビュー情報を通信部１７に与え、通信部１７から圧縮された画像情報およびビュー情報がネットワークを介して携帯電話２に送信される。 Then, the image information screen information processing unit 18, which is compressed give the view information read from the view information storage unit 20 to the communication unit 17, the mobile phone image information and view information compressed from the communication unit 17 via the network It is sent to the 2.
このため、携帯電話２の通信部１２により圧縮された画像情報およびビュー情報が受信される。 Therefore, the image information and view information that has been compressed by the communication unit 12 of the portable telephone 2 is received. 圧縮された画像情報は携帯電話２の画面情報処理部１３に与えられる。 The compressed image information is provided to the screen information processing unit 13 of the portable telephone 2. 画面情報処理部１３は、圧縮された画像情報を画像展開部１４に与え、画像展開部１４において展開された画像情報が再び画面情報処理部１３に与えられる。 Screen information processing unit 13 provides the compressed image information to the image developing unit 14, the image information expanded by the image expansion section 14 is supplied to the screen information processing unit 13 again.
一方、ビュー情報は、画面情報処理部１３を介してビュー領域記憶部１６に書き込まれて保存される。 On the other hand, the view information is recorded and stored in the view region storing unit 16 via the screen information processing unit 13.
そして、Ｓ２において、画面情報処理部１３は、ビュー領域記憶部１６から読み込んだビュー情報を参照して各ビュー領域に対応する画像情報を生成し、操作側表示部２ａに与えることにより表示させる。 Then, in S2, the screen information processing unit 13 generates image information corresponding to each view region with reference to the view information read from the view region storing unit 16, and displays by providing the operating-side display unit 2a.
従って、ＰＣ３から携帯電話２側に送信される画像情報は、少なくとも携帯電話２の表示部に表示させるべきビュー領域に対応する画像情報が含まれ、必要に応じて表示順位が低く表示されないビュー領域の画像情報やビュー領域外部の画像情報が加えられる。 Therefore, the image information transmitted to the mobile phone 2 from PC3 is includes image information corresponding to the view region to be displayed on at least the display unit of the cellular phone 2, it is not displayed lower display order as needed view area image information and view area outside of the image information is added. 逆にＰＣ３から携帯電話２側に送信される画像情報をＰＣ３の被操作側表示部３ａに表示される画像情報全体としてもよい。 Conversely may image information to be transmitted to the cellular phone 2 from PC3 as a whole image information displayed on the operated-side display unit 3a of the PC3.
図７は、図１に示す携帯電話２の操作側表示部２ａに表示される画面の一例を示す図である。 Figure 7 is a diagram showing an example of a screen displayed on the operating-side display unit 2a of the cellular phone 2 shown in FIG.
操作側表示部２ａは複数の表示領域を有する。 Operating-side display unit 2a includes a plurality of display areas. 例えば操作側表示部２ａは１つのメイン表示領域ＭＤと３つのサブ表示領域ＳＤ１、ＳＤ２、ＳＤ３とを有する。 For example the operating-side display unit 2a has one main display region MD and three sub display regions SD1, SD2, SD3. そして、メイン表示領域ＭＤおよびサブ表示領域ＳＤ１、ＳＤ２、ＳＤ３には、ＰＣ３の被操作側表示部３ａに表示された画面の一部、すなわちビュー情報で定義されたビュー領域の一部が表示される。 Then, the main display region MD and sub display regions SD1, SD2, SD3, a part of the screen displayed on the operated-side display unit 3a of the PC3, namely see some of the defined view region in the view information that.
メイン表示領域ＭＤおよびサブ表示領域ＳＤ１、ＳＤ２、ＳＤ３に表示される内容は、ビュー情報のパラメータとして定義した表示順位によって決定され、例えば表示順位が１番目とされたビュー領域の画像がメイン表示領域ＭＤに表示される一方、表示順位が２番目、３番目、４番目とされたビュー領域の画像がそれぞれサブ表示領域ＳＤ１、ＳＤ２、ＳＤ３に表示される。 Content displayed on the main display region MD and sub display regions SD1, SD2, SD3 are determined by the display order defined as the parameters of the view information, such as display order is the first and the image is the main display area of ​​the view regions while displayed on the MD, 2 th display order, third, image of the fourth and views region is displayed on the sub display region SD1, SD2, SD3, respectively.
図７は図４および図５で定義したビュー情報に従って被操作側表示部３ａの一部を操作側表示部２ａに表示させた例であり、例えばメイン表示領域ＭＤには表示順位が１番目であるビュー領域Ｖ３の一部が表示されている。 Figure 7 is an example of displaying a part of the operated-side display unit 3a on the operating-side display unit 2a in accordance with the view information defined in FIGS. 4 and 5, for example, first the display order on the main display region MD part of a view region V3 are displayed.
同様に、サブ表示領域ＳＤ１、ＳＤ２、ＳＤ３には、表示順位に従って、ビュー領域Ｖ４、Ｖ５、Ｖ２の一部が表示されている。 Similarly, in the sub display area SD1, SD2, SD3, in accordance display order, are displayed part of the view region V4, V5, V2. また、ビュー領域Ｖ１は表示順位が５番目であるため、携帯電話２の操作側表示部２ａには表示されていない。 Further, since the view region V1 is the fifth display order, not displayed on the operating-side display unit 2a of the cellular phone 2.
尚、表示領域（メイン表示領域ＭＤおよびサブ表示領域ＳＤ１、ＳＤ２、ＳＤ３）は、予め携帯電話２側で設定され、ウィンドウとは異なり固定的な領域である。 Incidentally, the display area (main display region MD and sub display regions SD1, SD2, SD3) is set in advance mobile phone 2, a fixed region unlike windows.
また、このようなビュー領域をＰＣ３の被操作側表示部３ａの画面全体とすることもできる。 Further, such a view region may be the entire screen of the operated-side display unit 3a of the PC3.
図８は、ビュー領域の１つを図１に示すＰＣ３の被操作側表示部３ａに表示される画面全体とした場合に、携帯電話２の操作側表示部２ａに表示される画面の一例を示す図である。 8, when the entire screen to be displayed one of the view area in the operated-side display unit 3a of PC3 shown in FIG. 1, an example of a screen displayed on the operating-side display unit 2a of the cellular phone 2 It illustrates.
図８に示すように、ビュー領域の１つをＰＣ３の被操作側表示部３ａの画面全体として、被操作側表示部３ａの画面全体を表示させるための全画面ビューというビュー領域とすることができる。 As shown in FIG. 8, the entire screen of the operated-side display unit 3a of the one of the view region PC3, be a view area that the entire screen view for displaying the entire screen of the operated-side display unit 3a it can. すなわち、サブ表示領域ＳＤ２に背景とともに各ウィンドウＷ１、Ｗ２、Ｗ３を含むＰＣ３の被操作側表示部３ａの画面全体が表示される。 That is, the entire screen of the operated-side display unit 3a of PC3 including the windows W1, W2, W3 is displayed together with the background on the sub display region SD2. このような全画面ビューを定義することで、ＰＣ３の被操作側表示部３ａにおける画面全体のウィンドウの配置をより容易に把握することができる。 Such By defining a full screen view, it is possible to more easily grasp the placement of the entire screen window in the operated-side display unit 3a of the PC3.
全画面ビューの所属ウィンドウは全てのウィンドウとして定義することができるが、ウィンドウと関連付けないで定義してもよい。 While assigned window of the entire screen view can be defined as all windows may be defined not associate with the window. あるいは全画面ビュー以外の通常のビュー領域と同様に、単一のウィンドウと関連付けてビュー領域の領域範囲がＰＣ３の被操作側表示部３ａの画面全体に相当する領域範囲となるように定義してもよい。 Or, like a normal view regions other than the entire screen view, defined as the region range of a view region correlated with a single window is a region range corresponding to the entire screen of the operated-side display unit 3a of PC3 it may be.
そして、このように携帯電話２の操作側表示部２ａにＰＣ３の被操作側表示部３ａに表示された画像が分割されて各ビュー領域の画像として表示されるため、ユーザは画面のスクロールや位置移動等の操作回数を低減させて、より容易にＰＣ３の被操作側表示部３ａに表示された画像を確認することができる。 Since the thus cellular phone 2 of the operating-side display unit 2a in displayed on the operated-side display unit 3a of the PC3 image is displayed is divided as the image of each view region, the user scrolls or position of the screen the number of operations such as movement is reduced, it can be more easily confirm the image displayed on the operated-side display unit 3a of the PC3.
次にＳ３において、例えば操作対象となるウィンドウ（アプリケーション）が選択される。 Next, in S3, for example, be operated window (application) is selected. 以下、現在操作対象となっているウィンドウをアクティブウィンドウと、アクティブウィンドウを所属ウィンドウとするビュー領域をアクティブなビュー領域と称する。 Hereinafter referred to as the window that is currently operated object and the active window, the view area to the active window belongs window as the active view region. アクティブウィンドウは、通常ＰＣ３の被操作側表示部３ａでは最前面に表示され、携帯電話２の操作側表示部２ａでは、例えばアクティブなビュー領域がメイン表示領域ＭＤに表示されるように設定される。 Active window is displayed in the foreground at the operated-side display unit 3a of the normal PC3, it is set as the operating-side display unit 2a of the cellular phone 2, for example, the active view region is displayed on the main display region MD . 従って、アクティブウィンドウを所属ウィンドウとするビュー領域が複数ある場合には、サブ表示領域ＳＤ１、ＳＤ２、ＳＤ３に表示される画像の一部あるいは全部もアクティブなビュー領域となる。 Therefore, if the view area to belong to the active window window there are multiple, the sub display area SD1, SD2, SD3 part or active view region all of the image displayed on.
アクティブウィンドウの切換は、携帯電話２の操作部１０の操作によって行なうことができる。 Switching of the active window can be performed by operating the operation unit 10 of the portable telephone 2. すなわち、アクティブウィンドウの切換える場合には、ユーザがアクティブウィンドウの切換情報を操作部１０から制御情報処理部１１に入力する。 That is, when switching the active window, the user inputs the switching information in the active window from the operation unit 10 to the control information processing unit 11. 例えば、ビュー領域の識別番号を直接入力したり、サブ表示領域ＳＤ１、ＳＤ２、ＳＤ３を選択することによりアクティブウィンドウの切換情報を操作部１０から制御情報処理部１１に入力することができる。 For example, it is possible to enter the identification number of a view region to input directly to the control information processing unit 11 the switching information in the active window from the operating section 10 by selecting the sub display area SD1, SD2, SD3. また、携帯電話２の操作部１０からＰＣ３のＡｌｔキー＋ＴＡＢキーを操作した際と同様な情報をアクティブウィンドウの切換情報を制御情報処理部１１に入力してもよい。 Also, the same information and when the operation unit 10 of the cellular phone 2 has operated the Alt key + TAB key of PC3 may input switching information of the active window to the control information processing unit 11.
次に、Ｓ４において、制御情報処理部１１はアクティブウィンドウの切換情報を受けるとビュー領域記憶部１６からビュー情報を取得し、表示順位が１番目のビュー領域の所属ウィンドウがアクティブウィンドウとすべきウィンドウでない場合には、ビュー領域の表示順位の変更処理を実行してビュー領域記憶部１６のビュー情報を更新させる。 Next, in S4, the control information processing unit 11 is to be the active window when receiving the switching information acquires view information from the view region storing unit 16, assigned window is the active window of the first view area display order window If not, the updates the view information of the view region storing unit 16 by executing the process of changing the display order of the view area.
図９は、アクティブウィンドウの変更があった場合に図４に示すビュー情報の表示順位を更新させて得られた新たなビュー情報を示す図である。 Figure 9 is a diagram showing a new view information obtained by updating the display order of the view information shown in FIG. 4 when there is a change in the active window.
図９に示すようにアクティブウィンドウの変更を行うと、その都度ビュー領域の表示順位が更新される。 Any changes in the active window, as shown in FIG. 9, the display order of each time the view area is updated. すなわち表示順位（１）では、ウィンドウＷ２がアクティブウィンドウになっており、表示順位が１番目であるためウィンドウＷ２を所属ウィンドウとするビュー領域Ｖ２がメイン表示領域ＭＤに表示される。 That is, in the display order (1), the window W2 has become the active window, the view region V2 of the windows W2 and assigned window for the display order is the first is displayed in the main display area MD.
この状態から、サブ表示領域ＳＤ１に表示されているビュー領域Ｖ３をアクティブなビュー領域として操作対象に変更すると表示順位（２）のようになる。 From this state, so that the view region V3 displayed on the sub display region SD1 and changing the operation target as the active view region of the display order (2). すなわち、ビュー領域Ｖ３の表示順位が１番目になり、ビュー領域Ｖ３の所属ウィンドウであるウィンドウＷ３に所属する別のビュー領域Ｖ４、Ｖ５の表示順位がビュー領域Ｖ３の表示順位の変更に伴って上がる。 That is, the display order of the view region V3 is made to the first, the display order of another view area V4, V5 belonging to the window W3 is assigned window of the view region V3 is increased along with the change of the display order of the view region V3 .
さらに、この状態からサブ表示領域ＳＤ１に表示されているビュー領域Ｖ４をアクティブなビュー領域として操作対象に変更すると表示順位（３）のようになる。 Furthermore, so that the display order is changed to the operation target of the view region V4 displayed from this state in the sub display area SD1 as the active view region (3). すなわち、この場合は、アクティブウィンドウが変更されないため、ウィンドウＷ３に所属するビュー領域Ｖ３、Ｖ５が表示順位の上位に設定される。 That is, in this case, since the active window is not changed, the view region V3, V5 belonging to the window W3 are set to higher display order.
このように、共通のウィンドウにおいて別々の領域として定義された複数のビュー領域Ｖ３、Ｖ４、Ｖ５の表示順位を同時に、すなわち互いに追従して変更することで、携帯電話２で操作を行なうウィンドウの複数の領域を同時に操作側表示部２ａに表示させることができる。 Thus, the display order of the common multiple views regions defined as separate regions in the window V3, V4, V5 simultaneously, that by changing to follow one another, a plurality of windows to perform an operation on the mobile phone 2 can be displayed in the area at the same time operating-side display unit 2a.
図１０は、アクティブウィンドウの変更に伴って図４に示すビュー情報におけるウィンドウの表示順位を設定する際における情報処理手順の一例を示すフローチャートである。 Figure 10 is a flowchart illustrating an example of an information processing procedure at the time of setting the window display order in the view information shown in FIG. 4 in accordance with the change in the active window.
制御情報処理部１１では、操作部１０からアクティブウィンドウの切換情報を受けると、例えば図１０に示すアルゴリズムに従って新たなウィンドウの表示順位を設定する。 The control information processing unit 11, when receiving the switching information in the active window from the operating unit 10 sets the display order of the new window in accordance with the algorithm shown in FIG. 10 for example. すなわち、制御情報処理部１１は、アクティブウィンドウの切換情報を受けると、ビュー情報を表示順位の順に参照し、アクティブなビュー領域に指定されたビュー領域の表示順位を１番目に、アクティブなビュー領域に指定されたビュー領域と同じウィンドウに所属するビュー領域を、より高い表示順位に、その他のビュー領域をより低い表示順位に設定する。 That is, the control information processing unit 11 receives the switching information of the active window, with reference to the order of display order to view information, the first display order of the specified view region to the active view region, the active view region the view area belonging to the same window as specified view area to, to a higher display priority, to set the other view area to a lower display order.
ここで、上記のように同じウィンドウに所属するビュー領域のみならず、複数のウィンドウを互いに関連付けて、あるウィンドウを所属ウィンドウがアクティブウィンドウとなった場合に、関連付けられた他のウィンドウを所属ウィンドウとするビュー領域の表示順位が上位となるようにすることもできる。 Here, not only the view region belonging to the same window as described above, in association with a plurality of windows each other, when a certain window assigned window becomes the active window, and the other associated with a window assigned window display order of the view region can be made to be higher.
そうすることで、複数のウィンドウを同時に参照して操作を行なう必要がある場合に、より少ない操作で各ウィンドウのビュー領域をそれぞれメイン表示領域やサブ表示領域に表示させることができる。 By doing so, it is possible to display multiple windows if simultaneously it is necessary to refer to performing an operation, each window of the view region to the main display area and the sub display area each with fewer operations.
尚、この場合、ビュー情報に所属ウィンドウに関連するウィンドウの特定情報がパラメータとして追加され、制御情報処理部１１による表示順位の設定に用いられる。 In this case, the specific information of windows associated with assigned window to view information is added as a parameter, used to set the display order by the control information processing unit 11.
次に、Ｓ５において、携帯電話２から新たなビュー領域の表示順位がＰＣ３側に送信される。 Next, in S5, the display order of a new view region from the cellular phone 2 is transmitted to the PC3 side. すなわち、携帯電話２の制御情報処理部１１は、新たなビュー領域の表示順位を通信部１２に与え、携帯電話２の通信部１２からＰＣ３の通信部１７にネットワークを介して新たなビュー領域の表示順位が送信される。 That is, the mobile phone 2 of the control information processing unit 11 gives the display order of a new view region to the communication unit 12, the mobile phone from the second communication unit 12 of the new view region via the network to the communication unit 17 of PC3 display order is sent. そして、ＰＣ３の通信部１７で新たなビュー領域の表示順位が受信される。 Then, the received display order of a new view region at the communication unit 17 of PC3.
次に、Ｓ６において、ＰＣ３の通信部１７は、新たなビュー領域の表示順位をＰＣ３の制御情報処理部２１に与える。 Next, in S6, the communication unit 17 of PC3 gives the display order of a new view region to the control information processing unit 21 of PC3. そして、制御情報処理部２１は、新たなビュー領域の表示順位に基づいてビュー情報記憶部２０のビュー情報を更新させるとともに、ＯＳ２２にウィンドウの表示順位情報を与えることにより、ＰＣ３側のアクティブウィンドウを変更させる。 Then, control information processing unit 21, along with updates the view information of the view information storage unit 20 based on the display order of the new view region, by providing the display order information of the window to OS 22, the active window of PC3 side to change.
次に、Ｓ７において、ＰＣ３の画面情報処理部１８は、擬似ドライバ２３を介してＶＲＡＭ２５からＰＣ３の被操作側表示部３ａに表示されたアクティブウィンドウ変更後における画像情報を取得する。 Next, in S7, the screen information processing unit 18 of PC3 obtains image information after the active window changes displayed from VRAM25 via the pseudo driver 23 on the operated-side display unit 3a of the PC3. そして、画面情報処理部１８は取得した画像情報を画像圧縮部１９に与えて圧縮されたアクティブウィンドウ変更後の画像情報を生成する。 Then, the screen information processing unit 18 generates image information after the active window changes compressed giving image information acquired in the image compression unit 19.
次に、Ｓ８において、アクティブウィンドウ変更後の圧縮画像がＰＣ３の画面情報処理部１８からＰＣ３の通信部１７、携帯電話２の通信部１２を介して携帯電話２の画面情報処理部１３に送信される。 Then, transmitted in S8, the communication unit 17 of the compressed image after the active window changes from the screen information processing unit 18 of PC3 PC3, the screen information processing unit 13 of the cellular phone 2 via the communication unit 12 of the cellular phone 2 that.
次に、Ｓ９において、携帯電話２の画面情報処理部１３は、画像展開部１４にアクティブウィンドウ変更後の圧縮画像を与えて展開処理を実行させ、得られたアクティブウィンドウ変更後の画像をビュー領域記憶部１６に記憶されたビュー領域の表示順位に従って操作側表示部２ａに表示させる。 Next, in S9, the screen information processing unit 13 of the cellular phone 2, the image developing unit 14 gives the compressed image after the active window changes to execute the development process, the image view area after the active window changes obtained It is displayed on the operating-side display unit 2a in accordance with the display order of the stored view region in the storage unit 16. すなわち、画面情報処理部１３は、ビュー領域記憶部１６から読み込んだ更新後の新たなビュー情報を参照し、表示順位が１番目のビュー領域に対応する画像情報を操作側表示部２ａに与えてメイン表示領域ＭＤに表示させる。 That is, the screen information processing unit 13 refers to new view information after update read from the view region storing unit 16, the display order is given to the operating-side display unit 2a of the image information corresponding to the first view area to be displayed in the main display area MD.
尚、このようにアクティブウィンドウが選択されると、アクティブウィンドウを所属ウィンドウとするビュー領域がメイン表示領域ＭＤに表示されるが、サブ表示領域に表示されており、かつアクティブウィンドウに所属するビュー領域が操作対象として選択された場合には、アクティブウィンドウの切換が行なわれずに、表示領域がサブ表示領域からメイン表示領域ＭＤに変更される。 Incidentally, if the active window is selected so, view region although view region to the active window and assigned window is displayed on the main display region MD, which are displayed in the sub display area, and belonging to the active window There when it is selected as the operation target is not performed is switching of the active window, the display region is changed from the sub display area on the main display region MD.
また、ＰＣ３側の操作でアクティブウィンドウが変更された場合にも、ＰＣ３側の制御情報処理部２１において表示順位の再設定処理が行なわれて、新たなビュー領域の表示順位がＰＣ３の通信部１７および携帯電話２の通信部１２を介して携帯電話２側の制御情報処理部１１に与えられる。 Further, if the active window is changed in PC3 side of the operation is also being conducted reconfiguration processing of the display order in the control information processing unit 21 of PC3-side communication unit of the display order of a new view region is PC3 17 and it provided to the control information processing unit 11 of the cellular phone 2 via the communication unit 12 of the portable telephone 2. そして、携帯電話２側の操作側表示に表示されるアクティブなビュー領域が変更される。 Then, the active view region to be displayed on the operating-side display of the cellular phone 2 side is changed. つまり、ＰＣ３と携帯電話２とで互いにアクティブウィンドウの同期がとられ、必要に応じてその他の操作情報についても同期がとられる。 In other words, the synchronization of the active window from one another in the PC3 and the mobile phone 2 is taken, the synchronization is taken for the other operation information as needed.
そして、このように操作対象となるアクティブウィンドウおよびアクティブなビュー領域が選択されると、ユーザは携帯電話２の操作部１０からＰＣ３においてウィンドウを介して起動されている各種アプリケーションを遠隔操作することができる。 When the active window and active view region to be this way the operation target is selected, the user is able to remotely control the various applications that are activated via a window at the operation unit 10 of the cellular phone 2 PC3 it can. また、各種アプリケーションを遠隔操作に先立って、携帯電話２の操作側表示部２ａの表示形式を変更する等の各種操作を行なうこともできる。 Furthermore, various applications prior to the remote operation, it is also possible to perform various operations such as changing the display format of the operating-side display unit 2a of the cellular phone 2.
ここで、一般に携帯電話２等の小型の情報機器においてはＰＣ３等の情報機器と異なりマウス等の入力装置がなく、かつボタンの数も限定される。 Here, generally no input device such as a mouse unlike information equipment such as PC3 in small information devices such as mobile phones 2, and the number of buttons is limited. そこで、携帯電話２のようなボタン数が限定された操作部１０であっても、ＰＣ３におけるキーボードやマウス等の入力装置と同等な情報入力が行えるような機能が携帯電話２の制御情報処理部１１に備えられる。 Therefore, even in the operation unit 10 the button number is limited, such as a mobile phone 2, the control information processing unit input device and the like can be performed equivalent information input function is a cellular phone 2 such as a keyboard and a mouse in PC3 It included in the 11.
図１１は、図１に示す携帯電話２の操作部１０におけるボタン配置の一例を示す図である。 Figure 11 is a diagram showing an example of button arrangement of the operation unit 10 of the cellular phone 2 shown in FIG.
携帯電話２には、操作側表示部２ａとともに操作部１０が設けられる。 The mobile phone 2, the operation unit 10 is provided with operating-side display unit 2a. 操作部１０には、方向指示キーとしての上下左右ボタン１０ａ、役割変更キーとしての機能ボタン１０ｂ、数字ボタン１０ｃが設けられる。 The operation unit 10, the upper and lower left and right buttons 10a as direction instruction key, a function button 10b serving as a role change key, numeric buttons 10c is provided. また、操作側表示部２ａには、メイン表示領域ＭＤ、サブ表示領域ＳＤ１、ＳＤ２、ＳＤ３が設けられ、操作対象となるメイン表示領域ＭＤにはカーソル３０が表示される。 Further, the operating-side display unit 2a, the main display region MD, the sub display area SD1, SD2, SD3 are provided on the main display region MD to be operated is displayed cursor 30. そして、画像情報やＰＣ３の操作情報等の各種情報がアンテナ部３１から電波として基地局５との間で送受信される。 Then, the image information and various information such as PC3 operation information is transmitted and received between the base station 5 as a radio wave from the antenna 31.
メイン表示領域ＭＤに対しては、操作部１０の数字ボタン１０ｃを用いた文字入力やアプリケーションの操作の他、例えば、カーソル３０の移動、ＰＣ３のウィンドウにおける上下スクロールバーおよび左右スクロールバーの移動、携帯電話２の操作側表示部２ａに表示されるビュー領域の移動（スクロール）、携帯電話２の操作側表示部２ａに表示されるビュー領域の表示倍率（大きさ）の変更といった操作を実施することができる。 The main against the display region MD, the other character input and the operation of the application using the numeric buttons 10c of the operating unit 10, for example, movement of the cursor 30, movement of the down scroll bar and left scroll bars in PC3 windows, mobile movement of the view region displayed on the operating-side display unit 2a of the phone 2 (scrolling), to perform operations such as changing a magnification of the view area (size) to be displayed on the operating-side display unit 2a of the cellular phone 2 can.
これらの操作のうち、カーソル３０の移動、ＰＣ３のウィンドウにおける上下スクロールバーおよび左右スクロールバーの移動、携帯電話２の操作側表示部２ａに表示されるビュー領域の移動については、携帯電話２の操作側表示部２ａに向かって上下左右方向への操作が必要となり、ビュー領域の表示倍率の変更については、１次元の値の変更が必要となる。 Of these operations, movement of the cursor 30, movement of the down scroll bar and left scroll bars in PC3 window, the movement of the view region displayed on the operating-side display unit 2a of the cellular phone 2, the cellular phone 2 Operation operation of the vertical and horizontal directions toward the side display unit 2a is required, for changing the display magnification of the view area, it is necessary to change the one-dimensional value.
通常のＰＣ３等の情報機器では、上記の操作はマウスやトラックボール等の入力デバイスにより行なうことができるが携帯電話２のように操作部１０にハード的あるいはソフト的な制限がある場合には、より少ないボタンで同等の機能を備える必要がある。 In a typical PC3 such information equipment, if the above operation is the operation unit 10 hardware or software limitations on as a mouse or can be performed by an input device such as a trackball is the mobile phone 2, it is necessary to provide the same functions with fewer buttons. そこで、上下左右方向への操作を上下左右ボタン１０ａあるいはジョグダイアルに割り当て、カーソル３０の移動、スクロールバーの移動、ビュー領域の移動等の各移動操作の種類を機能ボタン１０ｂでモード切換（上下左右ボタン１０ａの機能変更）できるように構成される。 Therefore, assignment of operations to the vertical and horizontal directions in the vertical left and right buttons 10a or a jog dial, the movement of the cursor 30, the scroll bar moves in the type the function button mode switching (up, down, left, and right buttons 10b of each movement operation such as movement of the view area 10a function modification) can be configured as. このためユーザは、上下左右ボタン１０ａの機能切り換えにより、より少ないボタンによる操作でＰＣ３のカーソル移動やスクロールバーの移動といった操作を実行することができる。 Thus the user can by the function switching of the upper and lower left and right buttons 10a, to perform operations in operation such cursor movement and a scroll bar movement of PC3 by fewer buttons.
また、通常は、メイン表示領域ＭＤに表示されたビュー領域に対してＰＣ３上で動作しているアプリケーションの操作が行なわれるが、メイン表示領域ＭＤに表示させるビュー領域の切り換えや、遠隔操作を終了等のアプリケーションの操作以外の操作も行なわれる。 Also, typically, the operation of the application is performed operating on PC3 with respect to the view region displayed on the main display region MD, termination and switching of a view region to be displayed on the main display region MD, the remote control operation other than the operation of the application etc. also performed. そこで、アプリケーション上の操作を行なうアプリケーション操作モードとアプリケーション以外の操作を行なうための制御モードとの機能切換機能も機能ボタン１０ｂに割り当てられる。 Therefore, the function switching function of the control mode for performing operations other than applications operating mode and the application to perform operations on the application is also assigned to the function button 10b. このように、機能ボタン１０ｂによる機能切り換えにより、ユーザはより少ないボタンによる操作でＰＣ３の操作と同等の操作を行なうことができる。 Thus, by the function switching by the function button 10b, the user can perform an operation equivalent to the operation of PC3 in operation by fewer buttons.
さらに、携帯電話２の操作側表示部２ａへの表示形式を複数種類設定し、表示モードとして切り換えることができるようにもすることができる。 Furthermore, the display format of the operating-side display unit 2a of the cellular phone 2 and a plurality of types setting, can also be to be able to switch the display mode.
図１２は、図１に示す携帯電話２の操作側表示部２ａにタイトルバーを表示させた画面の表示形式を示す図である。 Figure 12 is a diagram showing a display format of a screen to display the title bar on the operating-side display unit 2a of the cellular phone 2 shown in FIG.
図１２に示すように、携帯電話２の操作側表示部２ａには、メイン表示領域ＭＤと３つのサブ表示領域ＳＤ１、ＳＤ２、ＳＤ３が設けられる。 As shown in FIG. 12, the operating-side display unit 2a of the cellular phone 2, the main display region MD and three sub display regions SD1, SD2, SD3 are provided. ここで、各サブ表示領域ＳＤ１、ＳＤ２、ＳＤ３にはそれぞれタイトルバーＴＢ１、ＴＢ２、ＴＢ３が付加される。 Wherein each sub display regions SD1, SD2, respectively the SD3 title bar TB1, TB2, TB3 are added. タイトルバーＴＢ１、ＴＢ２、ＴＢ３は、各サブ表示領域ＳＤ１、ＳＤ２、ＳＤ３に表示されるビュー領域がアクティブであるか否かを色を変えることで明示するように設定される。 Title bar TB1, TB2, TB3, each sub display region SD1, SD2, SD3 view region to be displayed on is set to explicitly by changing the color whether active. このため、現在操作対象であるアクティブウィンドウおよびアクティブなビュー領域をより明確に確認して判断することができる。 Therefore, it can be determined to confirm the active window and active view region more clearly the current operation object.
つまり、各タイトルバーＴＢ１、ＴＢ２、ＴＢ３は、操作側表示部２ａの各サブ表示領域ＳＤ１、ＳＤ２、ＳＤ３に表示させた画像に対応するそれぞれのビュー領域の所属ウィンドウが操作対象のウィンドウ（アクティブウィンドウ）であるか否かを示す識別表示の一例として機能する。 That is, each title bars TB1, TB2, TB3, each sub display region of the operating-side display unit 2a SD1, SD2, of each view region corresponding to the image displayed on the SD3 assigned window is the operation target window (active window ) and whether it functions as an example of the identification display indicating that.
図１２の例ではタイトルバーＴＢ１、ＴＢ２、ＴＢ３をビュー領域がアクティブであるか否かの識別表示として用いているが、各サブ表示領域の枠の色などの各サブ表示領域がアクティブであるか否かを識別できれば、表示方法は任意である。 Although the view area title bar TB1, TB2, TB3 in the example of FIG. 12 is used as the identification whether active or the sub display area such as the color of the frame of each sub display region is active if identifying whether the display method is arbitrary. さらに、アクティブウィンドウに対応しているメイン表示領域にもタイトルバーを付加してサブ表示領域と同様の色を付することで、同じウィンドウに対応しているか否かが直感的に分かるように設定することもできる。 Furthermore, by subjecting the same color and the sub display area also adds a title bar in the main display region corresponding to the active window, set as whether or not corresponding to the same window intuitive it is also possible to.
また、さらに、タイトルバーＴＢ１、ＴＢ２、ＴＢ３が対応するウィンドウ毎に異なる色となるようにすれば、複数のメイン表示領域あるいはサブ表示領域のうち、どの表示領域のビュー領域がそれぞれどのウィンドウに対応しているのかを直感的に分かるようにすることもできる。 Still further, if so title bar TB1, TB2, TB3 is a different color for each corresponding window, among the plurality of main display region or sub display region, view region of which the display area corresponds to which window each to that of whether it is also possible to make intuitive.
タイトルバーＴＢ１、ＴＢ２、ＴＢ３の色制御は、画面情報処理部１３がビュー領域記憶部１６からビュー情報を取得し、各サブ表示領域に表示されたビュー領域の所属ウィンドウがアクティブウィンドウであるか否か、すなわちビュー情報の表示順位が１番目であるか否かを判定し、判定結果に応じて操作側表示部２ａにタイトルバーＴＢ１、ＴＢ２、ＴＢ３の色情報を与えることにより実行される。 Whether the title bar TB1, TB2, TB3 color control of the screen information processing unit 13 acquires view information from the view region storing unit 16, assigned window of the respective sub display regions displayed view area is the active window or, that is, whether or not it is the first display order of the view information is performed by giving the color information of the title bars TB1, TB2, TB3 on the operating-side display unit 2a according to the determination result.
図１３は、図１に示す携帯電話２の操作側表示部２ａにスクロールバーを表示させた画面の表示形式を示す図、図１４は、図１３に示すスクロールバーの着色に用いる色の一例を示す図、図１５は図１４に示すスクロールバーの着色に用いる色の設定基準の一例を示す図である。 Figure 13 is a diagram showing a display format of a screen to display the scroll bar on the operating-side display unit 2a of the cellular phone 2 shown in FIG. 1, FIG. 14, an example of a color to be used for coloring of the scroll bar shown in FIG. 13 shows, FIG. 15 shows an example of a color setting criteria used for coloring of the scroll bar shown in FIG. 14.
図１３に示すように携帯電話２の操作側表示部２ａにスクロールバーを表示させて利便性を向上させることもできる。 To display the scroll bar on the operating-side display unit 2a of the cellular phone 2 as shown in FIG. 13 can also improve the usability. 図１３（ａ−１）および（ｂ−１）は、ＰＣ３の被操作側表示部３ａに表示される画面の一例を示し、図１３（ａ−２）および（ｂ−２）は、そのときに携帯電話２の操作側表示部２ａに表示される画面の一例を示す。 Figure 13 (a-1) and (b-1) is shows an example of a screen displayed on the operated-side display unit 3a of PC3, FIG 13 (a-2) and (b-2) is at that time shows one example of a screen displayed on the operating-side display unit 2a of the cellular phone 2.
図１３（ａ−１）および（ｂ−１）のようにあるウィンドウの領域がアクティブなビュー領域として、他の領域が非アクティブなビュー領域として設定されると、図１３（ａ−２）および（ｂ−２）に示すように携帯電話２の操作側表示部２ａに各ビュー領域のうち表示順位の高いものが表示される。 As an area active view region of the window in the manner of FIG. 13 (a-1) and (b-1), the other area is set as a non-active view regions, FIG. 13 (a-2) and those on the operating-side display unit 2a of the cellular phone 2 as shown in (b-2) high display order of each view region is displayed. すなわち、携帯電話２の操作側表示部２ａには、メイン表示領域ＭＤと複数のサブ表示領域ＳＤ１、ＳＤ２、ＳＤ３とが設けられ、メイン表示領域ＭＤには表示順位が１番目でアクティブなビュー領域の一部が、サブ表示領域ＳＤ１、ＳＤ２、ＳＤ３には表示順位が２番目、３番目、４番目のビュー領域の一部がそれぞれ表示される。 That is, the operating-side display unit 2a of the cellular phone 2, the main display region MD and a plurality of sub display regions SD1, SD2, SD3 and is provided, the active view region in the first display order on the main display region MD some of the second display order in the sub display area SD1, SD2, SD3, 3 th, are part of the 4 th view area is displayed respectively.
さらに、メイン表示領域ＭＤにはスクロールバー（上下スクロールバーＳＢ１、左右スクロールバーＳＢ２）が設けられる。 Further, scroll bars (up and down scroll bar SB1, left and right scroll bars SB2) are provided on the main display region MD. このスクロールバーは、メイン表示領域ＭＤに表示されたビュー領域やアクティブウィンドウの表示状態を色で示すように複数の色で着色される。 The scroll bars are colored with multiple colors to indicate the display status of the displayed view area and the active window on the main display region MD in color.
スクロールバーの着色に用いる色は、例えば図１４に示すように色１、色２、色３、色４の４色とされ、色１、色２、色３、色４にそれぞれ白、青、赤、紫が割り当てられる。 Color used in the coloring of the scroll bar, for example, the color 1, as shown in FIG. 14, the color 2, color 3, is a four-color color 4, color 1, color 2, color 3, respectively white color 4, blue, red, purple is assigned. そして、スクロールバーの各色１、色２、色３、色４には、それぞれ図１５に示すような設定基準でビュー領域およびアクティブウィンドウの表示状態が関連付けられる。 Then, scroll colors 1 bar, color 2, color 3, color 4, the display state of the view region and the active window is associated with the set criteria as shown in FIG. 15, respectively. すなわち、例えばスクロールバーの色が色１は、被操作側表示部３ａのうちアクティブウィンドウの外部の領域でかつメイン表示領域ＭＤに表示されていない範囲を、色２はアクティブウィンドウの内部の領域であるが、メイン表示領域ＭＤに表示されていない範囲を、色３は被操作側表示部３ａのうちアクティブウィンドウの外部の領域でかつメイン表示領域ＭＤに表示されている範囲を、色４はアクティブウィンドウの内部の領域であり、かつメイン表示領域ＭＤに表示されている範囲をそれぞれ示す。 That is, for example color 1 color of the scroll bar is a range that does not appear in an area outside the active window and the main display region MD of the operated-side display unit 3a, the color 2 is within the area of ​​the active window there is a range that is not displayed in the main display region MD, the range color 3 is displayed on the external area of ​​the active window and the main display region MD of the operated-side display unit 3a, the color 4 active It shows an internal area of ​​the window, and a range displayed on the main display region MD respectively.
このため、図１３（ａ−１）に示すようにアクティブウィンドウを所属ウィンドウとするビュー領域がアクティブウィンドウの内部となるように設定されている場合には、メイン表示領域ＭＤにアクティブウィンドウの内部のビュー領域が表示されるため、スクロールバーの色は、色１、色２及び色４で着色される。 Therefore, if the view area to assigned window the active window as illustrated in FIG. 13 (a-1) is set to be inside the active window, within the active window on the main display region MD because the view area is displayed, the color of the scroll bar, color 1, is colored with color 2 and color 4.
一方、図１３（ｂ−１）に示すようにアクティブウィンドウを所属ウィンドウとするビュー領域がアクティブウィンドウの外部となるように設定されている場合には、メイン表示領域ＭＤにアクティブウィンドウの一部とアクティブウィンドウの外部の領域とからなるビュー領域が表示されるため、スクロールバーの色は、色１、色２、色３及び色４で着色される。 On the other hand, if the view area to assigned window the active window as illustrated in FIG. 13 (b-1) is set to be outside of the active window, a portion of the active window on the main display region MD since the view region comprising the area outside the active window is displayed, the color of the scroll bar, color 1, color 2, is colored with a color 3 and color 4.
つまり、スクロールバーは、被操作側表示部３ａ、アクティブウィンドウおよび操作側表示部２ａのメイン表示領域ＭＤの相対的な位置関係を示す位置表示として機能する。 That is, the scroll bar functions as positional display indicating relative positional relationship of the main display region MD of the operated-side display unit 3a, the active window and the operating-side display unit 2a.
スクロールバーの色を制御する場合には、ＰＣ３の画面情報処理部１８が通信部１７を介して画像情報を携帯電話２の画面情報処理部１３に送信する際に、ＰＣ３の被操作側表示部３ａ全体の大きさと、アクティブウィンドウの位置および大きさに関する情報をも送信する。 When controlling the color of the scroll bar when the screen information processing unit 18 of PC3 transmits the image information to the screen information processing unit 13 of the cellular phone 2 via the communication unit 17, the operated-side display unit of the PC3 overall the magnitude 3a, also transmits information about the position and size of the active window. そして、携帯電話２の画面情報処理部１３は、ＰＣ３の被操作側表示部３ａ全体の大きさと、アクティブウィンドウの位置および大きさに関する情報に基づいてスクロールバーの色を決定して操作側表示部２ａに与えて表示させる。 Then, the screen information processing unit 13 of the cellular phone 2, the size of the entire the operated-side display unit 3a of the PC3, location and based on the information on the size determines the color of the scroll bar to the operating-side display unit of the active window to display given to 2a.
尚、スクロールバーの色は何色に定義してもよいが、色４を色２と色３を混ぜた色に定義すれば、ユーザが直感的にビュー領域やアクティブウィンドウの位置関係を把握することが容易となる。 The color of the scroll bar may be defined in any color, but by defining the color 4 color mixed with color 2 and color 3, the user grasps intuitively view region and the positional relationship of the active window it becomes easy.
このように、スクロールバーの色表示により、現在操作側表示部２ａに表示されている範囲が、ＰＣ３における被操作側表示部３ａの画面全体並びにアクティブウィンドウに対してどのような位置関係であるかを一目で判断することができる。 This way, the scroll bar color display, or a range that is currently displayed on the operating-side display unit 2a, a what positional relationship the entire screen as well as the active window of the operated-side display unit 3a in PC3 it is possible to determine at a glance.
図１６は、図１に示す携帯電話２の操作側表示部２ａの表示形式を操作側表示部２ａの角度に応じて切り換えるようにした例を示す図である。 Figure 16 is a diagram showing an example of a switched according to the angle of the operating-side display unit 2a of the display format of the operating-side display unit 2a of the cellular phone 2 shown in FIG.
図１６（ａ）は、操作側表示部２ａの幅が広い側を縦方向、幅が狭い側を横方向としてユーザが操作する際における向きとされた場合、すなわち携帯電話本体２ｂに対して操作側表示部２ａを縦方向に向けた場合に、操作側表示部２ａに表示される画面の表示形式を示し、図１６（ａ）は、操作側表示部２ａの幅が広い側を横方向、幅が狭い側を縦方向としてユーザが操作する際における向きとされた場合、すなわち携帯電話本体２ｂに対して操作側表示部２ａを横方向に向けた場合に操作側表示部２ａに表示される画面の表示形式を示す。 FIG. 16 (a), the wide side of the operating-side display unit 2a longitudinally when the width is the direction at the time when the user operates the narrow side as a lateral, i.e. operations on the cellular phone main body 2b when directed side display unit 2a in the vertical direction, shows a display format of a screen displayed on the operating-side display unit 2a, FIG. 16 (a), the wide side of the operating-side display unit 2a laterally, is displayed on the operating-side display unit 2a when if it is the orientation, i.e. the operating-side display unit 2a to the mobile phone main body 2b directed transversely at the time widths of operating user a narrow side as a vertical direction It shows a display format of the screen.
図１６（ａ）に示すように、操作側表示部２ａを携帯電話本体２ｂに対して縦方向に向けた場合には、例えば操作側表示部２ａの画面がメイン表示領域と、サブ表示領域とに２分割される。 As shown in FIG. 16 (a), when directed in the vertical direction relative to the main body of the cellular phone 2b the operating-side display unit 2a, and the main display area For example, a screen of the operating-side display unit 2a, and the sub display area It is divided into two. そして、メイン表示領域ＭＤには、図８と同様な画面全体を表示させるための全画面ビューが表示され、サブ表示領域ＳＤには表示順位が１番目のビュー領域が表示される。 Then, in the main display area MD, is displayed full screen view for displaying the entire same screen as Fig. 8, the sub display area SD is the display order is displayed first view area.
一方、操作側表示部２ａの角度を傾ける機能を備えた携帯電話２の場合には、図１６（ｂ）に示すように、操作側表示部２ａを携帯電話本体２ｂに対して横方向に向ける（９０度回転させる）ことができる。 On the other hand, in the case of the cellular phone 2 having a function of tilting angle of the operating-side display unit 2a, as shown in FIG. 16 (b), directed transversely to the operating-side display unit 2a to the cellular phone main body 2b (rotated 90 degrees) it can be. 操作側表示部２ａを携帯電話本体２ｂに対して横方向に向けると表示部角度検知部１５により操作側表示部２ａが携帯電話本体２ｂに対して横方向となったことが検知され、表示部角度情報として画面情報処理部１３に与えられる。 Operating-side display unit 2a and the operating-side display unit 2a directs in the horizontal direction with respect to the main body of the cellular phone 2b on the display unit angle detection unit 15 is detected that a lateral direction with respect to the cellular phone main body 2b, the display unit It is given to the screen information processing unit 13 as the angle information.
画面情報処理部１３は、表示部角度検知部１５から操作側表示部２ａが携帯電話本体２ｂに対して横方向となった旨の表示部角度情報を受けると、表示形式を切り換えて画像情報を生成し、操作側表示部２ａに与えて表示させる。 Screen information processing unit 13, the operating-side display unit 2a from the display unit angle detection unit 15 receives the display unit angle information to the effect that a lateral direction with respect to the portable telephone main body 2b, and the image information by switching the display format generated, to display given to the operating-side display unit 2a. この結果、例えば図１６（ｂ）に示すように全画面ビューのみが横方向に操作側表示部２ａの向きに追従してメイン表示領域ＭＤに表示される。 As a result, only the full screen view as shown in FIG. 16 (b) is displayed following the orientation of the operating-side display unit 2a in the horizontal direction on the main display region MD, for example.
同様に操作側表示部２ａを携帯電話本体２ｂに対して横方向となった状態から縦方向に傾けた場合にも、表示部角度検知部１５により操作側表示部２ａが携帯電話本体２ｂに対して縦方向となったことが検知されて表示部角度情報が画面情報処理部１３に与えられ、画面情報処理部１３は表示形式を切り換えて画像情報を生成し、操作側表示部２ａに与えて図１６（ａ）に示すように２分割されたメイン表示領域ＭＤとサブ表示領域ＳＤとを表示させる。 Similarly, by tilting the operating-side display unit 2a from the state becomes transverse to the cellular phone main body 2b in the vertical direction, the operating-side display unit 2a by the display unit angle detection unit 15 to the mobile phone unit 2b longitudinal and display unit angle information that is detected became is applied to the screen information processing unit 13, screen information processing unit 13 generates image information by switching the display format, giving the operating-side display unit 2a Te displaying the two divided main display region MD and sub display region SD as illustrated in FIG. 16 (a).
このように、操作側表示部２ａの向きに応じて縦型２分割の表示モードと横型分割無しの表示モードとを自動的に切り換えて表示させることもできる。 Thus, it is also possible to display automatically switches the display modes of the display mode and the horizontal division without vertical 2 divided according to the direction of the operating-side display unit 2a. このため、ユーザは、より細かな操作を行なう場合に携帯電話２の操作側表示部２ａの画面を最大限に用いて作業することができる。 Therefore, the user can work with the most of the screen of the mobile phone 2 of the operating-side display unit 2a in the case of finer operation. また、操作側表示部２ａを回転させることで自動的に全画面ビューの表示に切り換えることもできる。 It is also possible to switch the display of the automatic full screen view by rotating the operating-side display unit 2a.
以上のような各種表示形式による操作側表示部２ａへの表示ができるように設定し、携帯電話２の機能ボタン１０ｂによるワンタッチ操作で表示モードを各種モード変更の１つとして切り換えることができるようにもすることができる。 As can be set to allow the display of the operating-side display unit 2a with various display formats described above, it switches the display mode in one-touch operation by the mobile phone 2 of the function button 10b as one of the various modes change it can also be.
また、表示形式の他、現在所属ウィンドウがアクティブウィンドウではないビュー領域の画像が表示されたサブ表示領域については、アクティブウィンドウが変更させても画像表示を更新させずに、所属ウィンドウが最後にアクティブウィンドウとされたときの画像表示のままとすることができる。 Another display format, the sub display area where the image is displayed in the currently assigned window is not the active window view region is active without updating the display image even when allowed to change the active window, the assigned window is the last it can remain in the image display when a window.
つまり、あるビュー領域の所属ウィンドウをアクティブウィンドウにして画像を更新させた後、アクティブウィンドウを別のウィンドウに変更すると、新たにアクティブウィンドウを所属ウィンドウとするビュー領域の画像が最前面に表示され、過去に編集されたビュー領域の画像は新たにアクティブウィンドウを所属ウィンドウとするビュー領域の画像の後ろに隠れ、ユーザが確認できなくなる恐れがある。 That is, there After updating the image assigned window of the view region and the active window, changing the active window to another window, the image of the view region to newly assigned window the active window is displayed in the foreground, image of views area editing in the past newly hidden the active window behind the image of the view area to be assigned window, there is a possibility that the user can not be confirmed.
そこで、そのようなビュー領域の画像を所属ウィンドウが最後にアクティブウィンドウとされたときの画像表示のままとして継続して表示するようにすれば、アクティブウィンドウが別のウィンドウに変更されたとしても、常に最前面に表示されることとなり、操作側表示部２ａにおいてユーザが参照することができる。 Thus, if to display continuously a still image display when images assigned window of such a view region is set to the last active window, even as the active window is changed to another window, always be displayed in the foreground, the user can see the operating-side display unit 2a.
この場合、画面表示処理部１３にこのように動作させる機能を備えることができる。 In this case, it is possible to a function of operating in this way the screen display processing unit 13. すなわち、画面表示処理部１３は、ビュー領域記憶部１６に保存されたビュー情報を参照し、サブ表示領域に表示されたビュー領域の所属ウィンドウがアクティブウィンドウでない場合には、サブ表示領域に表示させた画像を更新させない。 That is, the screen display processing unit 13, when referring to the view information stored in the view region storing unit 16, the assigned window of the view region displayed on the sub display area is not the active window, is displayed in the sub display area It was not allowed to update the image.
ところで、ビュー領域が多数存在する場合には、表示順位が下位のビュー領域は操作側表示部２ａに表示されない。 Incidentally, when there are many view area, the lower the view region display order is not displayed on the operating-side display unit 2a. 従って、操作側表示部２ａに表示されないような表示順位が下位のビュー領域の表示順位を上げてメイン表示領域やサブ表示領域に表示させたい場合等のように携帯電話２のボタン操作によりマニュアルでビュー領域の表示順位を編集することが便利な場合がある。 Thus, a manual by the mobile phone 2 of the button operation as such when the display order so as not appear in the operating-side display unit 2a to be displayed on the main display area and the sub display area by increasing the display order of the lower view area it may be convenient to edit the display order of the view area.
そこで、携帯電話２のボタンにビュー領域の表示順位の編集機能を設けることもできる。 Therefore, it is also possible to provide the editing function of the display order of the view area to the mobile phone 2 button. そうすることで、アクティブウィンドウ以外のウィンドウを所属ウィンドウとするビュー領域で参照したいものがある場合に、アクティブウィンドウを変更することなく、サブ表示領域に目的のウィンドウに所属するビュー領域を表示させることができる。 By doing so, if there is something you want to see in the view area to a window other than the active window as the assigned window, without having to change the active window, possible to display the view area belonging to the purpose of the window in the sub display area can. 尚、このように動作させる機能は、制御情報処理部１１に備えることができる。 The function of operating in this manner, can be provided to the control information processing unit 11.
図１７は、図１に示す携帯電話２の操作部１０における機能ボタン１０ｂへの機能の割り当て例を示す図である。 Figure 17 is a diagram showing an example of the allocation of functions to the function button 10b of the operation unit 10 of the cellular phone 2 shown in FIG.
図１７に示すように例えば機能ボタンＦＢ１を押し下げた場合には、上下左右ボタン１０ａの機能変更というモード変更がなされ、機能ボタンＦＢ２を押し下げた場合には、操作モードを制御モードからアプリケーション操作モードあるいはその逆のモード変更がなされるように設定される。 When depressing the for example function button FB1 as shown in FIG. 17, the mode change is made that feature changes the vertical left and right buttons 10a, when depressing the function button FB2, the application operation from the control mode the operating mode mode or reverse mode change is set to be made thereof. また、機能ボタンＦＢ２を長時間（一定時間以上）押し下げた場合には、表示モード、すなわち縦型２分割の全画面モードと通常の表示モードの切り換えができるようにされる。 Further, function button FB2 long (predetermined time or more) when depressed is to allow the display mode, i.e., full screen mode and switching of the normal display mode of the vertical 2 division.
さらに、操作側表示部２ａのスクロールバーの表示非表示切換や、タイトルバーの表示非表示切換の機能を機能ボタン１０ｂに割り当てることもできる。 It is also possible to assign the display and non-display switching of a scroll bar of the operating-side display unit 2a, the function of the display non-display switching of a title bar to the function button 10b.
これらの切換処理は、制御情報処理部１１において実行される。 These switching process is executed in the control information processing unit 11. すなわち各数字ボタン１０ｃ、機能ボタン１０ｂ、上下左右ボタン１０ａの操作により操作部１０から操作情報が制御情報処理部１１に与えられると、制御情報処理部１１は現在の上下左右ボタン１０ａの機能モード等の各種モードをその都度更新して記憶する。 That is, each numeric buttons 10c, function button 10b, the vertical when the operation information from the operation unit 10 by operating the left and right buttons 10a is given to the control information processing unit 11, control information processing unit 11 is the current functional mode of the up, down, left, right button 10a or the like storing the various modes of the respective update to. そして、一旦モードが決定された後、機能ボタン１０ｂ以外の数字ボタン１０ｃや上下左右ボタン１０ａからの操作情報を受けると、画面情報処理部１３にアプリケーションの操作情報や画像のスクロール指示等の情報が与えられて操作側表示部２ａの表示が更新されるとともに、アプリケーションの操作情報の場合には、通信部１２に与えられてネットワークを介してＰＣ３側の通信部１７に送信される。 Then, once the mode is determined, it receives the operation information from the function button 10b other numeric buttons 10c or up, down, left, right button 10a, the information of the scroll instruction or the like of the application operation information and images on the screen information processing unit 13 together with the display of given by the operating-side display unit 2a is updated, in the case of the application of the operation information is transmitted is given to the communication unit 12 to the communication unit 17 of PC3 side via the network.
そして、図６のＳ１０において、例えば、アプリケーション以外の操作を行なうための制御モードで、携帯電話２のメイン表示領域やサブ表示領域に表示される画像の移動指令等の操作情報が操作部１０に入力される。 Then, in S10 of FIG. 6, for example, in the control mode for performing operations other than applications, the operating information of the movement command of the image displayed on the main display region or sub display region of the cellular phone 2 the operating unit 10 It is input.
次にＳ１１において、操作部１０から制御情報処理部１１に操作情報が与えられ、画面の再表示であれば画面情報処理部１３に操作情報に基づく再表示指令を通知する。 Next, in S11, given the operation information from the operation unit 10 to the control information processing unit 11 notifies the redisplay command based on the operation information to the screen information processing unit 13 when the redisplay screen. このため画面情報処理部１３は再表示指令に基づいて、所要の画像情報を生成して操作側表示部２ａに与えて表示させる。 Therefore the screen information processing unit 13 based on the redisplay command, and displays given on the operating-side display unit 2a generates the required image information.
尚、この際、メイン表示部やサブ表示部に表示されていなかった領域の画像を表示させる場合に、未だＰＣ３から該当する画像情報を受信していない場合には、ＰＣ３に画像情報の送信要求を送信し、ＰＣ３から画像情報を受信して表示させる。 At this time, when displaying an image of an area which has not been displayed on the main display and the sub display unit, when not received yet image information corresponding the PC3, the transmission request for image data to PC3 It sends, to receive and display image information from the PC3. 逆にＰＣ３から全画面ビューに相当する画像情報を既に受信している場合のように画像再表示に必要な画像情報が携帯電話２側に保存されている場合には、再度ＰＣ３に画像情報の送信要求をする必要はない。 When the image information necessary for image reconstruction appears as if conversely have already received the image information corresponding to the full screen view from the PC3 are stored in the mobile phone 2 side, of the image information in PC3 again it is not necessary to the transmission request.
また、Ｓ１２において、例えば、アプリケーションの遠隔操作を行なうためのアプリケーションモードで、アクティブウィンドウにおけるカーソル３０の移動や文字入力等の操作情報がアプリケーション操作情報として携帯電話２の操作部１０に入力される。 Further, in S12, for example, in an application mode for performing remote operations of an application, operating information such as movement or text input cursor 30 in the active window is input to the operation unit 10 of the cellular phone 2 as the application operating information.
このため、Ｓ１３において、アプリケーション操作情報が制御情報処理部１１に与えられ、携帯電話２の通信部１２、ＰＣ３の通信部１７を介してＰＣ３の制御情報処理部２１に与えられる。 Therefore, in S13, the application operating information is provided to the control information processing unit 11 is supplied to the control information processing unit 21 of PC3 via the communication unit 12, PC3 of the communication unit 17 of the portable telephone 2.
次に、Ｓ１４において、ＰＣ３の制御情報処理部２１は、アプリケーション操作情報をＯＳ２２に与えて、アプリケーションの操作を実行させる。 Next, in S14, the control information processing unit 21 of PC3, giving the application operating information to the OS 22, to perform the operations of the application. この結果、アプリケーション操作後の例えばカーソル移動後の画像がアクティブウィンドウに表示される。 As a result, the image after e.g. cursor movement after application operation is displayed in the active window.
次に、Ｓ１５において、ＰＣ３の画面情報処理部１８は、アクティブウィンドウに所属するビュー領域に対応するアプリケーション操作後の画像を擬似ドライバ２３を介して取得し、画像圧縮部１９に与えて圧縮処理を実行させる。 Next, in S15, the screen information processing unit 18 of PC3 is the image after application operation corresponding to the view region belonging to the active window obtained via the pseudo driver 23, a compression processing applied to the image compression unit 19 to be executed. このため、アプリケーション操作後の圧縮画像が生成される。 Therefore, the compressed image after application operation is generated.
次に、Ｓ１６において、アプリケーション操作後の圧縮画像がＰＣ３の画面情報処理部１８から携帯電話２の画面情報処理部１３に送信される。 Next, in S16, the compressed image after application operation is sent to the screen information processing unit 13 of the cellular phone 2 from the screen information processing unit 18 of PC3.
そして、Ｓ１７において、Ｓ９と同様にアプリケーション操作後の画像が携帯電話２の操作側表示部２ａに表示される。 Then, in S17, the image after the application, the same procedures as S9 is displayed on the operating-side display unit 2a of the cellular phone 2.
つまり、以上に示す情報機器遠隔操作システム１は、ＰＣ３を始めとするマルチウィンドウ表示が可能な表示装置を持つ情報機器を、ネットワークを経由して接続した小型情報端末等の情報機器から操作を行なうシステムであり、その際、操作側表示部２ａの表示領域を被操作側表示部３ａに表示されるウィンドウを基準に設定するものである。 In other words, the information equipment remote operating system 1 shown in above, the information device having a multi-window display is a display device capable of including PC3, perform operations from the information device such as a small information terminal connected via a network a system, that time is used for setting the display area of ​​the operating-side display unit 2a based on the window displayed on the operated-side display unit 3a.
このため、情報機器遠隔操作システム１によれば、携帯電話２等の情報機器の操作側表示部２ａを参照して操作する場合、被操作側表示部３ａにおけるウィンドウ単位で操作側表示部２ａに表示される画像を切り換えることが容易となる。 Therefore, according to the information equipment remote operating system 1, when operating with reference to the operating-side display unit 2a of the information equipment such as cellular phone 2, the operating-side display unit 2a in the window unit in the operated-side display unit 3a it is easy to switch the image to be displayed. つまり携帯電話２等の情報機器の簡単な操作でより容易に操作対象となる情報機器のウィンドウを変更することができる。 That can change the window more easily be operated information equipment with a simple operation of information equipment such as a mobile phone 2.
また、１つのウィンドウに対し複数の表示範囲をビュー領域として操作側表示部２ａ用に設定することで大きなウィンドウを操作側表示部２ａに表示した場合に、同じウィンドウ中の複数の箇所を同時に参照することができる。 The reference to the case where the display on the operating-side display unit 2a a large window by setting a plurality of display range for one window for operating-side display unit 2a as a view region, a plurality of places in the same window at the same time can do.
さらに、被操作側のＰＣ３等の情報機器や携帯電話２等の小型情報端末の操作によってウィンドウを移動した場合であっても、ウィンドウの基準位置との相対的な領域として操作側表示部２ａに表示させる画像の領域が設定されるため、操作側表示部２ａにおいて表示範囲がずれることなく再表示を行なうことができる。 Further, even when the moving window by the operation of small-sized information terminal information devices and mobile phones 2 such as PC3 of the operated side, the operating-side display unit 2a as a relative area between the reference position of the window since the area of ​​the image to be displayed is set, it is possible to re-display without deviating the display range in the operating-side display unit 2a.
また、携帯電話２とＰＣ３におけるアクティブウィンドウが互いに同期をとることにより、携帯電話２とＰＣ３の操作対象を常に一致させる状態を保つことができる。 Moreover, by taking the active window is mutually synchronized in the mobile phone 2 and PC3, you can keep the always match the cellular phone 2 and the PC3 of the operation target.
さらに、ビュー領域を被操作側表示部３ａの画面全体を表示させるための全画面ビューとすることによりＰＣ３の画面全体の状態を参照しながら作業を行なうことができる。 Furthermore, it is possible to perform the work with reference to the state of the entire PC3 screen by a full screen view for displaying the entire screen of the view region the operated-side display unit 3a.
本発明に係る情報機器遠隔操作システムの実施の形態を示す構成図。 Configuration diagram showing an embodiment of the information equipment remote operating system according to the present invention. 図１に示す情報機器遠隔操作システムの詳細構成図。 Detailed configuration diagram of the information equipment remote operating system illustrated in FIG. 図１に示すＰＣの被操作側表示部に表示される画面の一例を示す図。 It illustrates an example of a screen displayed on the operated-side display unit of the PC shown in FIG. 図１に示す携帯電話の操作側表示部に表示させるＰＣの画面の範囲であるビュー領域を規定するためのビュー情報の一例を示す図。 It illustrates an example of a view information for defining the view area in the range of a PC screen to be displayed on the operating-side display unit of the portable telephone shown in FIG. 図４に示すビュー情報により規定されたビュー領域の一例を示す図。 It illustrates an example of a defined view areas by the view information shown in FIG. 図１に示す情報機器遠隔操作システムにより、携帯電話からネットワークを介してＰＣを操作する際の流れを示すシーケンス図。 The information equipment remote operating system illustrated in FIG. 1, a sequence diagram showing the flow when operating a PC via a network from a mobile phone. 図１に示す携帯電話の操作側表示部に表示される画面の一例を示す図。 It illustrates an example of a screen displayed on the operating-side display unit of the portable telephone shown in FIG. ビュー領域の１つを図１に示すＰＣの被操作側表示部に表示される画面全体とした場合に、携帯電話の操作側表示部に表示される画面の一例を示す図。 When the entire screen displayed on the operated-side display unit of the PC shown in FIG. 1 one view area, illustrates an example of a screen displayed on the operating-side display unit of the mobile phone. アクティブウィンドウの変更があった場合に図４に示すビュー情報の表示順位を更新させて得られた新たなビュー情報を示す図。 Shows a new view information obtained by updating the display order of the view information shown in FIG. 4 when there is a change in the active window. アクティブウィンドウの変更に伴って図４に示すビュー情報におけるウィンドウの表示順位を設定する際における情報処理手順の一例を示すフローチャート。 Flow chart illustrating an example of an information processing procedure at the time of setting the window display order in the view information shown in FIG. 4 in accordance with the change in the active window. 図１に示す携帯電話の操作部におけるボタン配置の一例を示す図。 It illustrates an example of a button arrangement of the operation unit of the portable telephone shown in FIG. 図１に示す携帯電話の操作側表示部にタイトルバーを表示させた画面の表示形式を示す図。 It shows a display format of a screen to display the title bar on the operating-side display unit of the portable telephone shown in FIG. 図１に示す携帯電話の操作側表示部にスクロールバーを表示させた画面の表示形式を示す図。 It shows a display format of a screen to display the scroll bar on the operating-side display unit of the portable telephone shown in FIG. 図１３に示すスクロールバーの着色に用いる色の一例を示す図。 It shows an example of the color used for the coloring of the scroll bar shown in Figure 13. 図１４に示すスクロールバーの着色に用いる色の設定基準の一例を示す図。 It shows an example of the color setting criteria used for coloring of the scroll bar shown in FIG. 14. 図１に示す携帯電話の操作側表示部の表示形式を操作側表示部の角度に応じて切り換えるようにした例を示す図。 Diagram showing an example in which the switched according to the angle of the operating-side display unit to display format of the operating-side display unit of the portable telephone shown in FIG. 図１に示す携帯電話の操作部における機能ボタンへの機能の割り当て例を示す図。 Diagram illustrating an example of allocation of functions to the function button in the operation unit of the portable telephone shown in FIG.
１ 情報機器遠隔操作システム２ 携帯電話２ａ 操作側表示部２ｂ 携帯電話本体３ パーソナルコンピュータ（ＰＣ） 1 information equipment remote operating system 2 mobile phone 2a operating-side display unit 2b cellular phone unit 3 personal computer (PC)
３ａ 被操作側表示部４ インターネット５ 基地局１０ 操作部１０ａ 上下左右ボタン１０ｂ 機能ボタン１０ｃ 数字ボタン１１ 制御情報処理部１２ 通信部１３ 画面情報処理部１４ 画像展開部１５ 表示部角度検知部１６ ビュー領域記憶部１７ 通信部１８ 画面情報処理部１９ 画像圧縮部２０ ビュー情報記憶部２１ 制御情報処理部２２ ＯＳ 3a the operated-side display unit 4 Internet 5 Base station 10 operation unit 10a up, down, right and left buttons 10b function button 10c numeric button 11 the control information processing unit 12 communication unit 13 screen information processing unit 14 image developing unit 15 display unit angle detection unit 16 view area storage unit 17 communication unit 18 screen information processing unit 19 image compressing unit 20 view information storage unit 21 the control information processing unit 22 OS
２３ 擬似ドライバ２４ デバイスドライバ２５ ＶＲＡＭ 23 pseudo-driver 24 device driver 25 VRAM
２６ 被操作アプリケーション記憶部３０ カーソル３１ アンテナ部Ｗ１、Ｗ２、Ｗ３ ウィンドウＡＰ１，ＡＰ２，ＡＰ３ アプリケーションＰ１、Ｐ２、Ｐ３ ペインＶ１、Ｖ２、Ｖ３、Ｖ４、Ｖ５ ビュー領域ＭＤ メイン表示領域ＳＤ、ＳＤ１、ＳＤ２、ＳＤ３ サブ表示領域ＴＢ１、ＴＢ２、ＴＢ３ タイトルバーＳＢ１ 上下スクロールバーＳＢ２ 左右スクロールバー 26 the operated application storing unit 30 Cursor 31 antenna portion W1, W2, W3 window AP1, AP2, AP3 application P1, P2, P3 pane V1, V2, V3, V4, V5 view area MD main display area SD, SD1, SD2, SD3 sub display area TB1, TB2, TB3 title bar SB1 up and down scroll bar SB2 left and right scroll bar
ウィンドウを被操作側表示部に表示させてアプリケーションを実行する被操作側の情報機器と、この被操作側の情報機器とネットワークを介して接続可能であり、かつ前記被操作側表示部よりも小型の操作側表示部を有する操作側の情報機器とを備え、前記被操作側の情報機器に、前記被操作側表示部に表示された画面の一部あるいは全範囲を前記操作側表示部に初期状態として表示させる場合における画像の範囲を前記ウィンドウと関連付けたビュー領域として、このビュー領域に関連付けられた所属ウィンドウ、所属ウィンドウの任意の基準位置からの相対的な領域範囲および前記操作側表示部に表示させる際の表示順位をパラメータとして有するビュー情報を記憶するビュー情報記憶部と、前記ビュー情報に従って前記操作側表示部に Small and the operated-side information equipment for running an application is displayed on the operated-side display unit windows, can be connected via the information device and the network of the operated-side, and than the operated-side display unit and an operating-side information equipment having an operating-side display unit, the information apparatus of the operated side, the initial part or full range of the screen the displayed on the operated-side display unit on the operating-side display unit the range of the image as the view area associated with the window when displaying the status, assigned window associated with this view area, the relative area coverage and the operating-side display unit from an arbitrary reference position of the assigned window and view information storing unit for storing view information having display order when displaying a parameter, the operating-side display unit in accordance with the view information 期状態として表示させる画像を生成する画面情報処理部と、この画面情報処理部により生成された画像とともにビュー情報を前記操作側の情報機器に送信し、かつ前記操作側の情報機器から前記アプリケーションの操作情報を受信する通信部と、この通信部により受信された前記アプリケーションの操作情報をオペレーティングシステムに与えて前記アプリケーションを操作する制御情報処理部とを設ける一方、前記操作側の情報機器に、前記被操作側の情報機器から送信された画像およびビュー情報を受信する通信部と、この通信部により受信されたビュー情報を記憶するビュー領域記憶部と、前記通信部により受信された画像の一部あるいは全範囲を前記ビュー領域記憶部に記憶されたビュー情報に従って前記操作側表示部が有する複 A screen information processing unit for generating an image to be displayed as period state, transmits the view information to the information equipment of the operating side together with the image generated by this screen information processing unit, and the information device of the operating side of the application a communication unit that receives the operation information, the operation information of the application received by the communication unit while giving the operating system providing a control information processing unit for operating the application, the information device of the operating side, the a communication unit for receiving image and view information transmitted from the information device of the operated side, a view region storing unit for storing the view information received by the communication unit, a part of the received image by the communication unit or double that said operating-side display unit has according to the view information stored the full range into the view region storing unit の表示領域に表示順位の高い順に表示させる画面情報処理部と、操作部に入力された前記アプリケーションの操作情報を通信部に与えて前記被操作側の情報機器に送信させる制御情報処理部とを設けたことを特徴とする情報機器遠隔操作システム。 A screen information processing unit to be displayed on the descending order of the display order on the display area of ​​the control information processing unit for giving operation information of the application which is input to the operation unit to the communication unit to transmit to the information device of the operated-side information equipment remote operating system characterized by comprising.
ウィンドウを被操作側表示部に表示させてアプリケーションを実行し、かつ前記被操作側表示部よりも小型の操作側表示部を有する操作側の情報機器にネットワークを介して接続可能な被操作側の情報機器を備え、前記被操作側の情報機器に、前記被操作側表示部に表示された画面の一部あるいは全範囲を前記操作側表示部に初期状態として表示させる場合における画像の範囲を前記ウィンドウと関連付けたビュー領域として、このビュー領域に関連付けられた所属ウィンドウ、所属ウィンドウの任意の基準位置からの相対的な領域範囲および前記操作側表示部に表示させる際の表示順位をパラメータとして有するビュー情報を記憶するビュー情報記憶部と、前記ビュー情報に従って前記操作側表示部に初期状態として表示させる画像を生成 Run the application to display the window on the operated-side display unit, and the operated-side display unit smaller of the operating side with an operating-side display unit information equipment via a network connectable the operated side of the an information device, the information apparatus of the operated side, the range of an image when displaying a part or the entire range of the screen the displayed on the operated-side display unit as an initial state to the operating-side display unit as the view area associated with the window, assigned window associated with the view area, the view with a display order of the time of displaying the relative region range and the operating-side display unit from an arbitrary reference position of the assigned window as a parameter generating a view information storage unit for storing information, an image to be displayed as the initial state to the operating-side display unit in accordance with the view information る画面情報処理部と、この画面情報処理部により生成された画像とともにビュー情報を前記操作側の情報機器に送信し、かつ前記操作側の情報機器から前記アプリケーションの操作情報を受信する通信部と、この通信部により受信された前記アプリケーションの操作情報をオペレーティングシステムに与えて前記アプリケーションを操作する制御情報処理部とを設けたことを特徴とする情報機器遠隔操作システム。 A screen information processing unit that, a communication unit for this along with the generated image by the screen information processing unit transmits the view information to the information equipment of the operating side, and receives the operation information of the application from the information device of the operating-side , information equipment remote operating system characterized by comprising a control information processing unit for operating the application by giving the operation information of the application received by the communication unit to the operating system.
ウィンドウを被操作側表示部に表示させてアプリケーションを実行する被操作側の情報機器にネットワークを介して接続可能であり、かつ前記被操作側表示部よりも小型の操作側表示部を有する操作側の情報機器を備え、この操作側の情報機器に、前記被操作側表示部に表示された画面の一部あるいは全範囲を前記操作側表示部に初期状態として表示させる場合における画像の範囲を前記ウィンドウと関連付けたビュー領域として、このビュー領域に関連付けられた所属ウィンドウ、所属ウィンドウの任意の基準位置からの相対的な領域範囲および前記操作側表示部に表示させる際の表示順位をパラメータとして有するビュー情報に従って前記被操作側の情報機器において生成されて送信された画像および前記ビュー情報を受信する通信部と It can be connected to the window via the network to the information equipment of the operated side to perform by displaying on the operated-side display unit application, and the operating side with a small operating-side display unit than the operated-side display unit with the information device, the information device of the operating side, the range of an image when displaying a part or the entire range of the screen the displayed on the operated-side display unit as an initial state to the operating-side display unit as the view area associated with the window, assigned window associated with the view area, the view with a display order of the time of displaying the relative region range and the operating-side display unit from an arbitrary reference position of the assigned window as a parameter communication and that receives the image and the view information transmitted is generated in the operated-side information equipment according to the information この通信部により受信されたビュー情報を記憶するビュー領域記憶部と、前記通信部により受信された画像の一部あるいは全範囲を前記ビュー領域記憶部に記憶されたビュー情報に従って前記操作側表示部が有する複数の表示領域に表示順位の高い順に表示させる画面情報処理部と、操作部に入力された前記アプリケーションの操作情報を通信部に与えて前記被操作側の情報機器に送信させる制御情報処理部とを設けたことを特徴とする情報機器遠隔操作システム。 The operating-side display unit according to the view information and view region storing unit for storing the view information received, a part or full range of the received image by the communication unit stored in the view region storing unit by the communication unit a plurality of the screens the information processing unit to be displayed on the high display precedence order in the display area, the control information processing giving operation information of the application which is input to the operation unit to the communication unit to transmit to the information device of the operated-side with the information equipment remote operating system characterized by comprising a part.
前記操作側の情報機器に設けられる画面情報処理部および被操作側の情報機器に設けられる画面情報処理部の少なくとも一方に、前記ビュー領域の表示順位を変更する機能を設け、所属ウィンドウが共通するビュー領域の表示順位を互いに追従して変更できるようにしたことを特徴とする請求項１ないし３のいずれか１項に記載の情報機器遠隔操作システム。 At least one of the operation information screen is provided in the device information processing section of the side and the operated-side of the screen information processing unit provided in the information device, a function of changing the display order of the view region, assigned window is common information equipment remote operating system according to any one of claims 1 to 3, characterized in that to be able to change to follow the display order of the view regions to each other.
前記操作側の情報機器に設けられる画面情報処理部および被操作側の情報機器に設けられる画面情報処理部の少なくとも一方に、前記ビュー領域の表示順位を変更する機能を設け、所属ウィンドウが関連するビュー領域の表示順位を互いに追従して変更できるようにしたことを特徴とする請求項１ないし３のいずれか１項に記載の情報機器遠隔操作システム。 At least one of the screen information processing unit provided in the screen information processing unit and of the operated-side information equipment provided in the information device of the operating side, a function of changing the display order of the view region, assigned window is associated information equipment remote operating system according to any one of claims 1 to 3, characterized in that to be able to change to follow the display order of the view regions to each other.
前記ビュー情報に、前記被操作側表示部の画面全体を表示させる全画面ビューについての情報を含めたことを特徴とする請求項１ないし３のいずれか１項に記載の情報機器遠隔操作システム。 Wherein the view information, the information equipment remote operating system according to any one of claims 1 to 3, characterized in that, including the information about the entire screen view for displaying the entire screen of the operated-side display unit.
前記被操作側の情報機器に設けられる制御情報処理部に、前記操作側の情報機器から操作対象となるビュー領域の選択情報を受けて、操作対象となる前記ビュー領域の所属ウィンドウが前記被操作側の情報機器における操作対象となるウィンドウと一致しない場合には、操作対象となる前記ウィンドウが前記ビュー領域の所属ウィンドウとなるように操作対象となるウィンドウの変更指令をオペレーティングシステムに与える機能を設けたことを特徴とする請求項１または３記載の情報機器遠隔操作システム。 Wherein the control information processing unit provided in the information equipment of the operated side, receives the selection information of a view region to be operated from the information device of the operating side, assigned window is the operated of the view region to be operated if it does not match the window to be operated on the side of the information equipment is provided with a function of giving a command of changing the window where the window to be operated becomes the operation target so as to be assigned window of the view region on the operating system information equipment remote operating system according to claim 1 or 3, wherein the a.
前記操作側の情報機器に設けられる画面表示処理部に、前記操作側表示部の表示領域に表示させた画像に対応するビュー領域の所属ウィンドウが操作対象となるウィンドウでない場合には、画像表示を更新させずに最後に操作対象となった際の画像を継続して表示させる機能を設けたことを特徴とする請求項１または３記載の情報機器遠隔操作システム。 A screen display processing unit provided in the information device of the operation side, when assigned window of the view region corresponding to the image displayed on the display region of the operating-side display unit is not a window to be operated, the image display information equipment remote operating system according to claim 1 or 3, wherein providing the ability to continuously displayed image when finally becomes the operation object without updating.
前記操作側の情報機器に設けられる制御情報処理部に、前記ビュー領域記憶部に保存されたビュー情報のうち表示順位を変更する機能を設けたことを特徴とする請求項１または３記載の情報機器遠隔操作システム。 The control information processing unit provided in the information device of the operating-side information according to claim 1 or 3, wherein providing the ability to change the display order of the view area view information stored in the storage unit equipment remote operating system.
前記操作側の情報機器に設けられる画面表示処理部に、前記操作側表示部の各表示領域に表示させた画像に対応するそれぞれのビュー領域の所属ウィンドウが操作対象のウィンドウであるか否かを示す識別表示を前記操作側表示部に表示させる機能を設けたことを特徴とする請求項１または３記載の情報機器遠隔操作システム。 A screen display processing unit provided in the information equipment of the operating side, whether assigned window of the respective view regions corresponding to the image displayed on the display area of ​​the operating-side display unit is the window to be operated information equipment remote operating system according to claim 1 or 3, wherein the provision of the function to be displayed on the operating-side display unit identification indication.
前記操作側の情報機器に設けられる画面表示処理部に、前記被操作側表示部、操作対象のウィンドウおよび前記操作側表示部の表示領域の相対的な位置関係を示す位置表示を前記操作側表示部に表示させる機能を設けたことを特徴とする請求項１または３記載の情報機器遠隔操作システム。 A screen display processing unit provided in the information equipment of the operating side, the operated-side display unit, the operating-side display position display indicating a relative positional relationship between the display area of ​​the window and the operating-side display unit of the operation target information equipment remote operating system according to claim 1 or 3, wherein the provision of the function to be displayed on the part.
前記操作側の情報機器に、操作側表示部の向きが変更せしめられたことを検知して前記操作側の情報機器における画面情報処理部に与える表示部角度検知部を設け、前記操作側の情報機器の画面情報処理部は、前記表示部角度検知部から受けた表示部角度情報に基づいて前記操作側表示部の表示形式を変更するようにしたことを特徴とする請求項１または３記載の情報機器遠隔操作システム。 The information device of the operating side, the display unit angle detection unit which detects that the orientation of the operating-side display unit has been allowed to change given to the screen information processing unit in the information device of the operating-side arranged, information of the operating-side screen information processing unit of the device, according to claim 1 or 3, wherein it has to change the display format of the operating-side display unit based on the display unit angle information received from the display unit angle detection unit information equipment remote operating system.
前記操作側の情報機器に方向指示キーと役割変更キーとを設け、前記方向指示キーにより前記操作側表示部の表示領域に表示されたカーソルの移動操作、前記操作側表示部の表示領域に表示された画像の移動操作および前記操作側表示部の表示領域に表示される画像の表示倍率の変更操作のうち少なくとも２つの操作を、前記役割変更キーの操作により切り換えて行なえるようにしたことを特徴とする請求項１または３記載の情報機器遠隔操作システム。 And said operation side information direction instruction key and role change key device provided, the direction instruction key by the movement operation of a cursor displayed in the display area of ​​the operating-side display unit, the display region of the operating-side display unit have been at least two operations of the moving operation and the operating-side display unit of the display the display magnification changing operation of the image displayed on the area of ​​the image, that was so performed is switched by the operation of the role change key information equipment remote operating system according to claim 1 or 3 wherein.
前記操作側の情報機器に役割変更キーを設け、前記操作側の情報機器の操作部に入力された前記アプリケーションの操作情報を通信部に与えて前記被操作側の情報機器に送信させることにより、前記アプリケーション上の操作を行なうアプリケーション操作モードと、前記アプリケーション以外の操作を行なうための制御モードとを前記役割変更キーの操作により切り換えることができるようにしたことを特徴とする請求項１または３記載の情報機器遠隔操作システム。 By transmitting the operating-side information equipment provided role change key, said of the operated-side information equipment giving operation information of the application which is input to the operation unit of the information device of the operating-side communication unit, operation and application operation mode for on the application, according to claim 1 or 3 further characterized in that a control mode for performing operations other than the application which make it possible to switch the operation of the role change key information equipment remote operating system.
JP2004120706A 2004-04-15 2004-04-15 Information apparatus remote control system Pending JP2005301908A (en)
CN 200510067784 CN1722908A (en) 2004-04-15 2005-02-07 Information apparatus remote control system
US11/056,092 US7536657B2 (en) 2004-04-15 2005-02-14 Information equipment remote operating system
EP05250850A EP1589414A3 (en) 2004-04-15 2005-02-15 Information equipment remote operating system
KR20050012318A KR100624523B1 (en) 2004-04-15 2005-02-15 Information equipment remote operating system
JP2005301908A true JP2005301908A (en) 2005-10-27
JP2004120706A Pending JP2005301908A (en) 2004-04-15 2004-04-15 Information apparatus remote control system
JPH02502492A (en) * 1989-06-19 1990-08-09
JPH05250125A (en) * 1992-12-16 1993-09-28 Casio Comput Co Ltd Multiwindow display controller
JP2002149299A (en) * 2000-11-03 2002-05-24 Acermsoft Inc Computer system capable of displaying a plurality of window screens
JP2003093354A (en) * 2001-09-21 2003-04-02 J-Phone Tokai Co Ltd Medical examination apparatus utilizing a mobile information terminal
WO2003102869A2 (en) 2002-06-04 2003-12-11 Billy Dennis Williams Device and method for memory reallocation with panning and scrolling area of display image
2005-02-07 CN CN 200510067784 patent/CN1722908A/en not_active Application Discontinuation
2005-02-15 KR KR20050012318A patent/KR100624523B1/en not_active IP Right Cessation
JPWO2016098497A1 (en) * 2014-12-17 2017-04-27 三菱電機株式会社 Remote operation system and information processing method
KR100624523B1 (en) 2006-09-20
KR20080044554A (en) 2008-05-21 Mobile phone and display method of the same
EP1796074B1 (en) 2019-02-27 Electronic terminal having screen division display function and screen display driving method thereof