(57)【要約】【課題】ユーザビリティを向上することのできる表示システム、表示システムの制御プログラム、および画像形成装置を提供する。【解決手段】表示システムは、操作パネルを含むＭＦＰ（Ｍｕｌｔｉｆｕｎｃｔｉｏｎ  Ｐｅｒｉｐｈｅｒａｌ）と、ＭＦＰと通信可能な端末装置とを備えた表示システムである。ＭＦＰは、操作パネルに表示している画面の情報と、操作パネルと端末装置との位置関係に関する情報である位置関係情報とに基づいて、端末装置に表示するメニュー画面を決定する（Ｓ７）。ＭＦＰは、決定したメニュー画面に関する情報を端末装置へ送信する（Ｓ９）。端末装置は、受信した情報に基づくメニュー画面を表示する（Ｓ１０）。【選択図】図１７
2013109614.tif 000002
【特許請求の範囲】
【請求項１】
操作パネルを含む画像形成装置と、前記画像形成装置と通信可能な表示装置とを備えた表示システムであって、
前記画像形成装置は、
前記操作パネルに表示している画面の情報と、前記操作パネルと前記表示装置との位置関係に関する情報である位置関係情報とに基づいて、前記表示装置に表示する画面を決定する決定手段と、
前記決定手段にて決定した画面に関する情報を前記表示装置へ送信する画面情報送信手段とを含み、
前記表示装置は、
前記画面情報送信手段から受信した情報に基づく画面を表示する表示手段を含む、表示システム。
【請求項２】
前記表示装置は、
前記表示手段にて表示した画面の操作を受け付ける操作受付手段と、
前記操作受付手段にて受け付けた操作の情報を前記画像形成装置に送信する操作情報送信手段とをさらに含み、
前記画像形成装置は、
前記操作情報送信手段にて送信した操作の情報に基づく処理を実行する処理実行手段をさらに含み、
前記画面情報送信手段は、前記処理実行手段にて実行した処理に伴う更新画面に関する情報を前記表示装置へさらに送信する、請求項１に記載の表示システム。
【請求項３】
前記操作受付手段は、ハードウェアキー、タッチパネル、マウス、および音声入力装置のうち少なくとも１つを用いた操作を受け付ける、請求項２に記載の表示システム。
【請求項４】
前記決定手段は、前記操作パネルに表示している画面の情報および前記位置関係情報のうち少なくともいずれか一方が変更された場合に、前記表示装置に表示する更新画面を決定し、
前記決定手段が決定した更新画面が、前記決定手段が前回決定した画面とは異なる場合に、前記表示手段は、前記画面情報送信手段から受信した情報に基づく更新画面を表示する、請求項１〜３のいずれかに記載の表示システム。
【請求項５】
前記表示装置は、
前記表示手段にて表示した画面の操作を受け付けた場合に、前記表示手段が更新画面を表示することを保留させる保留手段をさらに含む、請求項１〜４のいずれかに記載の表示システム。
【請求項６】
前記保留手段が更新画面の表示を保留させた場合において、前記表示手段にて表示した画面の表示を解除する操作が行なわれたときは、前記表示手段は更新画面を表示する、請求項５に記載の表示システム。
【請求項７】
前記画面情報送信手段は、前記決定手段にて決定した画面のデータを前記表示装置に送信する、請求項１〜６のいずれかに記載の表示システム。
【請求項８】
前記表示手段は、
前記画面情報送信手段から受信した情報に基づく画面を作成する画面作成手段をさらに含む、請求項１〜６のいずれかに記載の表示システム。
【請求項９】
前記表示装置は、
モーションセンサー、近接センサー、人感センサー、グローバルポジショニングシステム受信機、およびモーショントラッキング装置のうち少なくともいずれか１つを用いて、前記位置関係情報を取得する位置関係情報取得手段と、
前記位置関係情報取得手段にて取得した位置関係情報を前記画像形成装置へ送信する位置関係情報送信手段とをさらに含む、請求項１〜８のいずれかに記載の表示システム。
【請求項１０】
前記決定手段は、前記操作パネルに表示している画面の構成要素であって、画面変更の指示を受け付ける構成要素と、前記表示装置との距離に基づいて、前記表示装置に表示する画面を決定する、請求項１〜９のいずれかに記載の表示システム。
【請求項１１】
前記決定手段は、前記操作パネルに表示している画面の構成要素であって、画面変更の指示を受け付ける構成要素と画面の外縁との距離と、前記外縁と前記表示装置との距離とに基づいて、前記表示装置に表示する画面を決定する、請求項１〜９のいずれかに記載の表示システム。
【請求項１２】
前記決定手段は、前記操作パネルに表示している画面の構成要素であって、画面変更の指示を受け付ける構成要素と前記表示装置とを結ぶ直線が、仮想直線に対してなす角度にさらに基づいて、前記表示装置に表示する画面を決定する、請求項１０または１１に記載の表示システム。
【請求項１３】
前記決定手段は、前記操作パネルに表示している画面の複数の構成要素であって、画面変更の指示を受け付ける複数の構成要素の各々の優先度にさらに基づいて、前記表示装置に表示する画面を決定する、請求項１０〜１２のいずれかに記載の表示システム。
【請求項１４】
前記決定手段は、前記操作パネルと前記表示装置との２次元での位置関係に関する位置関係情報に基づいて、前記表示装置に表示する画面を決定する、請求項１〜１３のいずれかに記載の表示システム。
【請求項１５】
操作パネルを含む画像形成装置と、前記画像形成装置と通信可能な表示装置とを備えた表示システムの制御プログラムであって、
前記操作パネルに表示している画面の情報と、前記操作パネルと前記表示装置との位置関係に関する情報である位置関係情報とに基づいて、前記表示装置に表示する画面を前記画像形成装置で決定する決定ステップと、
前記決定ステップにて決定した画面に関する情報を前記画像形成装置から前記表示装置へ送信する画面情報送信ステップと、
前記画面情報送信ステップにおいて受信した情報に基づく画面を前記表示装置に表示する表示ステップとをコンピューターに実行させる、表示システムの制御プログラム。
【請求項１６】
操作パネルを備えた画像形成装置であって、
前記操作パネルに表示している画面の情報と、前記画像形成装置と通信可能な表示装置と前記操作パネルとの位置関係に関する情報である位置関係情報とに基づいて、前記表示装置に表示する画面を決定する決定手段と、
前記決定手段にて決定した画面に関する情報を前記表示装置へ送信する画面情報送信手段とをさらに備えた、画像形成装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は表示システム、表示システムの制御プログラム、および画像形成装置に関し、より特定的には、ユーザビリティを向上することのできる表示システム、表示システムの制御プログラム、および画像形成装置に関する。
【背景技術】
【０００２】
近年、携帯情報端末が高機能化しており、個人がＰＣ（パーソナルコンピューター）の代わりに携帯情報端末を所有している。携帯情報端末では、電子化された文書を任意の場所で自由に閲覧および編集することができる。携帯情報端末は、業務や生活の様々な場面で用いられるようになっている。
【０００３】
携帯情報端末の高機能化に伴い、操作パネルを搭載した画像形成装置と、携帯情報端末とを備えた表示システムにおいて、画像形成装置と携帯情報端末との連携が求められている。
【０００４】
画像形成装置と携帯情報端末とが連携するシステムにおいて、画像形成装置の情報を携帯情報端末に表示する技術は、たとえば下記特許文献１または２などに開示されている。下記特許文献１には、画像形成装置と携帯情報端末とからなり、携帯通信端末に画像形成装置の情報を表示させる画像形成装置情報伝達システムが開示されている。画像形成装置は、記録材上に画像を形成するための画像処理部と、画像処理部に接続されて画像形成装置の状態を表示し、操作者の操作を受け付けるための表示部と、外部機器との通信を行うための通信部とからなっている。携帯情報端末は、外部機器との通信を行うための通信部と、通信部を使用して授受される情報を表示し、操作者の操作を受け付けるための表示部とを有する携帯情報端末とからなっている。
【０００５】
下記特許文献２には、複合機に接続された携帯端末機を用いて、複合機に実行させる機能を選択可能な技術が開示されている。下記特許文献２の技術では、携帯端末機と複合機とが接続されると、携帯端末機の機能一覧要求送信手段は機能一覧要求を送信し、複合機の機能一覧送信手段は機能一覧要求を受信するのに応答して、複合機で実行可能な機能一覧を携帯端末機に送信する。ユーザインターフェース画面作成手段は、受信した機能一覧から、表示条件記憶手段に記憶されている表示条件を満たす表示にて各機能を表示する第１ユーザインターフェース画面を作成する。選択機能特定データ送信手段は、携帯端末機の操作部の操作によって選択された機能と属性情報を特定する選択機能特定データを複合機に送信する。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００４−１９３９４９号公報
【特許文献２】特開２００８−９２０７７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
通常、画像形成装置の操作パネルの画面には複数のメニューが表示可能である。これらのメニューは、画像形成装置の動作を設定する際などに押下されるものである。操作パネルにおいて、メニューに関する画面の表示方法には階層の概念が取り入れられている。
【０００８】
たとえば、操作パネルが用紙設定や画質設定などのメニュー（ボタンやアイコンなど）を含む最上位階層（第１の階層）の画面を表示している状態で、用紙設定に関するメニューの押下（クリックやタッチなど）を受け付けた場合、操作パネルは、用紙設定のメニューに関する画面を、第１の階層の１つ下の階層（第２の階層）の画面として表示する。さらに、操作パネルが用紙設定のメニューに関する第２の階層の画面であって、用紙サイズの設定や用紙の向きの設定などのメニューを含む画面を表示している状態で、用紙サイズ設定のメニューの押下を受け付けた場合、操作パネルは、用紙サイズの設定のメニューに関する画面を、第２の階層の１つ下の階層（第３の階層）の画面として表示する。この画面の変化は、操作パネルの表示画面の上下の移動に相当する。
【０００９】
また、操作パネルが各種設定のタブを含む画面を表示している状態で、特定のタブの押下を受け付けた場合、操作パネルは特定のタブに関する画面であって、現在表示している画面の階層と同じ階層の別の画面を表示する。この画面の変化は、操作パネルの表示画面の横の移動に相当する。
【００１０】
上述のように、従来の技術では、操作パネルの現在の表示画面を上下または横の階層に移動する場合には、操作パネルの画面に表示されたボタンやタブなどを実際に押下する必要があった。このため、操作パネルのユーザビリティが劣っていた。
【００１１】
本発明は、上記課題を解決するためのものであり、その目的は、ユーザビリティを向上することのできる表示システム、表示システムの制御プログラム、および画像形成装置を提供することである。
【課題を解決するための手段】
【００１２】
本発明の一の局面に従う表示システムは、操作パネルを含む画像形成装置と、画像形成装置と通信可能な表示装置とを備えた表示システムであって、画像形成装置は、操作パネルに表示している画面の情報と、操作パネルと表示装置との位置関係に関する情報である位置関係情報とに基づいて、表示装置に表示する画面を決定する決定手段と、決定手段にて決定した画面に関する情報を表示装置へ送信する画面情報送信手段とを含み、表示装置は、画面情報送信手段から受信した情報に基づく画面を表示する表示手段を含む。
【００１３】
上記表示システムにおいて好ましくは、表示装置は、表示手段にて表示した画面の操作を受け付ける操作受付手段と、操作受付手段にて受け付けた操作の情報を画像形成装置に送信する操作情報送信手段とをさらに含み、画像形成装置は、操作情報送信手段にて送信した操作の情報に基づく処理を実行する処理実行手段をさらに含み、画面情報送信手段は、処理実行手段にて実行した処理に伴う更新画面に関する情報を表示装置へさらに送信する。
【００１４】
上記表示システムにおいて好ましくは、操作受付手段は、ハードウェアキー、タッチパネル、マウス、および音声入力装置のうち少なくとも１つを用いた操作を受け付ける。
【００１５】
上記表示システムにおいて好ましくは、決定手段は、操作パネルに表示している画面の情報および位置関係情報のうち少なくともいずれか一方が変更された場合に、表示装置に表示する更新画面を決定し、決定手段が決定した更新画面が、決定手段が前回決定した画面とは異なる場合に、表示手段は、画面情報送信手段から受信した情報に基づく更新画面を表示する。
【００１６】
上記表示システムにおいて好ましくは、表示装置は、表示手段にて表示した画面の操作を受け付けた場合に、表示手段が更新画面を表示することを保留させる保留手段をさらに含む。
【００１７】
上記表示システムにおいて好ましくは、保留手段が更新画面の表示を保留させた場合において、表示手段にて表示した画面の表示を解除する操作が行なわれたときは、表示手段は更新画面を表示する。
【００１８】
上記表示システムにおいて好ましくは、画面情報送信手段は、決定手段にて決定した画面のデータを表示装置に送信する。
【００１９】
上記表示システムにおいて好ましくは、表示手段は、画面情報送信手段から受信した情報に基づく画面を作成する画面作成手段をさらに含む。
【００２０】
上記表示システムにおいて好ましくは、表示装置は、モーションセンサー、近接センサー、人感センサー、グローバルポジショニングシステム受信機、およびモーショントラッキング装置のうち少なくともいずれか１つを用いて、位置関係情報を取得する位置関係情報取得手段と、位置関係情報取得手段にて取得した位置関係情報を画像形成装置へ送信する位置関係情報送信手段とをさらに含む。
【００２１】
上記表示システムにおいて好ましくは、決定手段は、操作パネルに表示している画面の構成要素であって、画面変更の指示を受け付ける構成要素と、表示装置との距離に基づいて、表示装置に表示する画面を決定する。
【００２２】
上記表示システムにおいて好ましくは、決定手段は、操作パネルに表示している画面の構成要素であって、画面変更の指示を受け付ける構成要素と画面の外縁との距離と、外縁と表示装置との距離とに基づいて、表示装置に表示する画面を決定する。
【００２３】
上記表示システムにおいて好ましくは、決定手段は、操作パネルに表示している画面の構成要素であって、画面変更の指示を受け付ける構成要素と表示装置とを結ぶ直線が、仮想直線に対してなす角度にさらに基づいて、表示装置に表示する画面を決定する。
【００２４】
上記表示システムにおいて好ましくは、決定手段は、操作パネルに表示している画面の複数の構成要素であって、画面変更の指示を受け付ける複数の構成要素の各々の優先度にさらに基づいて、表示装置に表示する画面を決定する。
【００２５】
上記表示システムにおいて好ましくは、決定手段は、操作パネルと表示装置との２次元での位置関係に関する位置関係情報に基づいて、表示装置に表示する画面を決定する。
【００２６】
本発明の他の局面に従う表示システムの制御プログラムは、操作パネルを含む画像形成装置と、画像形成装置と通信可能な表示装置とを備えた表示システムの制御プログラムであって、操作パネルに表示している画面の情報と、操作パネルと表示装置との位置関係に関する情報である位置関係情報とに基づいて、表示装置に表示する画面を画像形成装置で決定する決定ステップと、決定ステップにて決定した画面に関する情報を画像形成装置から表示装置へ送信する画面情報送信ステップと、画面情報送信ステップにおいて受信した情報に基づく画面を表示装置に表示する表示ステップとをコンピューターに実行させる。
【００２７】
本発明のさらの他の局面に従う画像形成装置は、操作パネルを備えた画像形成装置であって、操作パネルに表示している画面の情報と、画像形成装置と通信可能な表示装置と操作パネルとの位置関係に関する情報である位置関係情報とに基づいて、表示装置に表示する画面を決定する決定手段と、決定手段にて決定した画面に関する情報を表示装置へ送信する画面情報送信手段とをさらに備える。
【発明の効果】
【００２８】
本発明によれば、ユーザビリティを向上することのできる表示システム、表示システムの制御プログラム、および画像形成装置を提供することができる。
【図面の簡単な説明】
【００２９】
【図１】本発明の一実施の形態における表示システムの概略的な構成を示す図である。
【図２】ＭＦＰ１００の内部構成を示すブロック図である。
【図３】本発明の一実施の形態における操作パネル１５０の構成を模式的に示す図である。
【図４】本発明の一実施の形態における端末装置２００の内部構成を示すブロック図である。
【図５】ＭＦＰ１００と端末装置２００との無線通信を概念的に示す図である。
【図６】操作パネル１５０に対する端末装置２００の位置と、端末装置２００が表示する画面との関係を模式的に示す図である。
【図７】端末装置２００に表示する画面の第１の決定方法を説明する図である。
【図８】端末装置２００に表示する画面の第１の決定方法を採用した場合における、端末装置２００の位置と端末装置２００に表示される画面との関係を示す図である。
【図９】端末装置２００に表示する画面の第２の決定方法を説明する図である。
【図１０】端末装置２００に表示する画面の第２の決定方法を採用した場合における、端末装置２００の位置と端末装置２００に表示される画面との関係を示す図である。
【図１１】端末装置２００に表示する画面の第３の決定方法を説明する図である。
【図１２】端末装置２００に表示する画面の第４の決定方法を説明する図である。
【図１３】モーションセンサーを用いた場合の位置関係情報の取得方法の一例を説明する図である。
【図１４】ＧＰＳ受信機を用いた場合の位置関係情報の取得方法の一例を説明する図である。
【図１５】３次元の位置関係情報に基づく場合の表示システムの動作を説明する図である。
【図１６】端末装置２００に画面を表示した後の表示システムの動作を説明する図である。
【図１７】表示システムの動作を示すフローチャートである。
【図１８】本発明の変形例における、操作パネル１５０に対する端末装置２００の位置と、端末装置２００が表示する画面との関係を模式的に示す図である。
【発明を実施するための形態】
【００３０】
以下、本発明の一実施の形態について、図面に基づいて説明する。
【００３１】
本実施の形態の表示システムは、操作パネルを含む画像形成装置と、画像形成装置と通信可能な表示装置とを備えた表示システムであり、画像形成装置と表示装置とが互いに連携する表示システムである。操作パネルとは、各種設定項目やメッセージなどを表示し、かつユーザーから各種操作を受け付ける操作表示部を含むものである。表示装置とは、各種情報を表示可能なものである。本実施の形態では、画像形成装置がＭＦＰ（Ｍｕｌｔｉｆｕｎｃｔｉｏｎ  Ｐｅｒｉｐｈｅｒａｌ）であり、表示装置が端末装置（携帯情報端末）である場合について説明する。
【００３２】
［表示システムの構成］
始めに、本実施の形態における表示システムの構成について説明する。
【００３３】
図１は、本発明の一実施の形態における表示システムの概略的な構成を示す図である。
【００３４】
図１を参照して、表示システムは、ＭＦＰ１００と、ｎ（ｎは２以上の整数）個の端末装置２００ａ、２００ｂ、・・・・（以降、端末装置のうち任意のものを端末装置２００と呼ぶ）と、サーバーＰＣ（Ｐｅｒｓｏｎａｌ  ｃｏｍｐｕｔｅｒ）３００とを備えている。ＭＦＰ１００は、たとえばスキャナ機能、ファクシミリ機能、複写機能、プリンターとしての機能、データ通信機能、およびサーバー機能を有している。端末装置２００は、たとえば携帯電話やＰＨＳ（Ｐｅｒｓｏｎａｌ  Ｈａｎｄｙｐｈｏｎｅ  Ｓｙｓｔｅｍ）などの通信端末である。ＭＦＰ１００、端末装置２００、およびサーバーＰＣ３００の各々は、ネットワーク４００を通じて相互に接続されている。
【００３５】
ネットワーク４００は、たとえば有線または無線のＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）などの専用回線を用いたものである。ネットワーク４００は、ＴＣＰ／ＩＰ（Ｔｒａｎｓｍｉｓｓｉｏｎ  Ｃｏｎｔｒｏｌ  Ｐｒｏｔｏｃｏｌ／Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）のプロトコルを用いて各種機器を接続する。ネットワーク４００に接続された機器は、お互いに各種データのやり取りが可能となっている。特に端末装置２００は、その携帯性に鑑みて、無線によりネットワーク４００に接続されていることが好ましいが、有線によりネットワーク４００に接続されていてもよい。なお、ネットワーク４００は一般回線を用いたものであってもよい。
【００３６】
ＭＦＰ１００は、たとえば、走査した原稿画像や、端末装置２００やサーバーＰＣ３００から受信したプリントデータに基づいて生成した画像の複写画像を、用紙上に形成する。プリントデータとは、たとえば、端末装置２００やサーバーＰＣ３００のオペレーティングシステムやアプリケーションプログラムが発行する描画命令を、プリンタドライバによってＭＦＰ１００が処理可能なページ記述言語に変換したものである。プリントデータは、ＰＤＦ、ＴＩＦＦ、ＪＰＥＧ、またはＸＰＳなどのファイルフォーマットで記述された文書データなどであってもよい。
【００３７】
ＭＦＰ１００は、ネットワーク４００を介して、端末装置２００やサーバーＰＣ３００に原稿画像を送信することも可能である。さらにＭＦＰ１００は、端末装置２００やサーバーＰＣ３００から受信した文書データを、ＭＦＰ１００内の記憶部１１１（図２）に蓄積することも可能である。
【００３８】
端末装置２００およびサーバーＰＣ３００の各々は、ＭＦＰ１００との間で無線通信または有線通信（好ましくは無線通信）によりデータの送受信を行うことが可能である。端末装置２００およびサーバーＰＣ３００の各々は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、固定記憶装置、モニター、およびタッチ操作可能なＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ）パネルなどを有している。
【００３９】
なお、表示システムは、図１とは異なる構成を有していてもよい。画像形成装置は、たとえば電子写真方式や静電記録方式などによって画像形成を行うものであり、ＭＦＰの他、ファクシミリ装置、複写機、またはプリンターなどであってもよい。表示装置は、端末装置である場合の他、たとえば画像形成装置に対して着脱可能な操作パネルなどであってもよい。表示システムは、サーバーＰＣを備えていなくてもよい。
【００４０】
図２は、ＭＦＰ１００の内部構成を示すブロック図である。
【００４１】
図２を参照して、ＭＦＰ１００は、制御部１０１（制限処理部）と、画像処理部１０３と、転送部１０５と、スキャナ部１０７と、印刷部１０９と、記憶部１１１と、操作パネル１５０とを主に含んでいる。制御部１０１は、ＭＦＰ１００の制御プログラム１０１ａを実行するＣＰＵと、制御プログラム１０１ａなどを記憶するＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）と、ＣＰＵの作業用のメモリであるＲＡＭなどを含んでいる。
【００４２】
画像処理部１０３は、画像データに対して処理を行なう。転送部１０５は、ネットワークインターフェースであり、端末装置２００などに対して画像データや画像サイズなどの情報の通信を行なう。スキャナ部１０７は、原稿の画像を読み取り、画像データを生成する。印刷部１０９は、画像処理部１０３にて処理された画像データに基づいて用紙などに画像を形成する。記憶部１１１は、たとえばハードディスク装置であり、操作パネル１５０および端末装置２００に表示する画面、画像、または文書などのデータを記憶している。
【００４３】
制御部１０１は、画像処理部１０３、転送部１０５、スキャナ部１０７、印刷部１０９、記憶部１１１、および操作パネル１５０の各々と、通信または信号の送受信を実施することで、ＭＦＰ１００全体を制御する。
【００４４】
図３は、本発明の一実施の形態における操作パネル１５０の構成を模式的に示す図である。
【００４５】
図３を参照して、操作パネル１５０は、タッチパネル方式の操作表示部（タッチパネル）１５１と、各種数値の入力を受け付けるテンキー１５３と、ＭＦＰ１００の各種機能を選択する際やＭＦＰ１００にジョブを実行させる際に押下されるスタートキーや、ジョブの中止の際に押下されるストップキーなどのハードウェアキー１５５などを主に備えている。操作表示部１５１には、ＭＦＰ１００の状態などに応じて様々な画面が表示される。ＭＦＰ１００のコピージョブの基本画面（ＭＦＰ１００がコピージョブの各種設定を受け付ける画面）には、ＭＦＰ１００に登録されているジョブの一覧を表示する際に押下されるジョブ表示アイコン１６１ａと、コピージョブに関する設定を確認する際に押下される設定確認アイコン１６１ｂと、コピージョブにおける応用機能を設定する際に押下される応用設定アイコン１６１ｃなどが表示される。これらのボタンは、操作表示部１５１に表示されたアイコン（ボタン、操作表示部１５１のソフトウェアキー）である。操作表示部１５１はｘｙ平面内に延在している。
【００４６】
図４は、本発明の一実施の形態における端末装置２００の内部構成を示すブロック図である。
【００４７】
図４を参照して、端末装置２００は、制御部２０１（制限処理部）と、転送部２０３と、端末通信部２０５と、記憶部２０７と、タッチパネル方式の操作表示部２５０とを主に含んでいる。制御部２０１は、端末装置２００の制御プログラム２０１ａを実行するＣＰＵと、制御プログラム２０１ａなどを記憶するＲＯＭと、ＣＰＵの作業用のメモリであるＲＡＭなどを含んでいる。
【００４８】
転送部２０３は、ネットワークインターフェースであり、ＭＦＰ１００などに対して画像データや画像サイズなどの情報の通信を行なう。記憶部２０７は、たとえばハードディスク装置であり、画像または文書などを記憶している。
【００４９】
端末通信部２０５は、操作表示部２５０で受け付けた操作の情報をＭＦＰ１００に送信する。また端末通信部２０５は、制御部２０１の制御によって位置関係情報を取得し、ＭＦＰ１００に送信する。位置関係情報とは、操作パネル１５０と端末装置２００との位置関係に関する情報である。
【００５０】
端末通信部２０５は、モーションセンサー、近接センサー、人感センサー、グローバルポジショニングシステム（ＧＰＳ）受信機、およびモーショントラッキング装置のうち少なくともいずれか１つを用いて、位置関係情報を取得する。モーションセンサーとは、加速度を検出するセンサーである。近接センサーとは、検出コイルのインピーダンス変化、静電容量変化、または高周波発振の周波数の変化などに基づいて、非接触で検出物体が近づいたことを検出するセンサーである。人感センサーとは、赤外線、超音波、または可視光などを用いて、物体の所在を関知するセンサーである。ＧＰＳ受信機とは、ＧＰＳ衛星から受信した電波の到達時間差から位置を求めるものである。モーショントラッキング装置とは、対象物の動きの軌跡を記録する装置である。端末通信部２０５は、上述以外の方法で位置関係情報を取得してもよい。
【００５１】
操作表示部２５０は、各種情報を表示し、表示した画面の操作をユーザーから受け付ける。操作表示部２５０は、ユーザーによるマルチタッチ操作を受け付け可能である。なお、操作表示部２５０は、タッチパネル以外の操作入力を受け付けるものであってもよく、ハードウェアキー、タッチパネル、マウス、および音声入力装置のうち少なくとも１つを用いた操作を受け付けるものであってもよい。操作表示部２５０は、操作入力を受け付けず、表示機能のみを有していてもよい。
【００５２】
［表示システムの概略的な動作］
続いて、本実施の形態における表示システムの概略的な動作について説明する。
【００５３】
図５は、ＭＦＰ１００と端末装置２００との無線通信を概念的に示す図である。
【００５４】
図５を参照して、端末装置２００は、位置関係情報を生成し、生成した位置関係情報を無線通信によりＭＦＰ１００へ送信する。ＭＦＰ１００は、操作パネル１５０に表示している画面の情報と、位置関係情報とに基づいて、端末装置２００に表示する画面を決定する。ＭＦＰ１００は、決定した画面に関する情報を端末装置２００へ送信する。端末装置２００は、ＭＦＰ１００から受信した情報に基づく画面を操作表示部２５０に表示する。
【００５５】
端末装置２００は、操作表示部２５０に表示した画面の操作を受け付けた場合に、その操作の情報をＭＦＰ１００に送信する。ＭＦＰ１００は、端末装置２００から受信した操作の情報に基づく処理を実行し、実行した処理に伴う更新画面に関する情報を端末装置２００へさらに送信する。
【００５６】
図６は、操作パネル１５０に対する端末装置２００の位置と、端末装置２００が表示する画面との関係を模式的に示す図である。
【００５７】
図６を参照して、たとえば、操作パネル１５０が表示している画面に、ジョブ表示アイコン１６１ａ、設定確認アイコン１６１ｂ、および応用設定アイコン１６１ｃなどのアイコン（ソフトウェアキー、構成要素）が含まれている場合を想定する。これらのアイコンは、操作パネル１５０の画面変更の指示を受け付けるものである。具体的には、ジョブ表示アイコン１６１ａが押下された場合には、操作パネル１５０は、ＭＦＰ１００に登録されているジョブの一覧の画面（以降、ジョブ表示アイコン１６１ａのメニュー画面と呼ぶことがある）を表示する。設定確認アイコン１６１ｂが押下された場合には、操作パネル１５０は、コピージョブに関して有効にされている設定を示す画面（以降、設定確認アイコン１６１ｂのメニュー画面と呼ぶことがある）を表示する。応用設定アイコン１６１ｃが押下された場合には、操作パネル１５０は、応用機能として設定可能な項目を示す画面（以降、応用設定アイコン１６１ｃのメニュー画面と呼ぶことがある）を表示する。
【００５８】
ＭＦＰ１００は、ジョブ表示アイコン１６１ａ、設定確認アイコン１６１ｂ、および応用設定アイコン１６１ｃと、端末装置２００との位置関係に関する位置関係情報に基づいて、端末装置２００に表示する画面を決定する。ＭＦＰ１００は、たとえば、上記の３つのアイコンのうち端末装置２００が最も近いアイコンを特定し、そのアイコンを押下した場合に操作パネル１５０に表示される画面と同一の画面を、端末装置２００に表示する画面として決定する。位置関係情報は、２次元での（図３中ｚ軸を無視したｘｙ平面内の）操作パネル１５０と端末装置２００との位置関係に関する情報であってもよいし、３次元の操作パネル１５０と端末装置２００との位置関係に関する情報であってもよい。
【００５９】
具体的には、操作パネル１５０の操作表示部１５１（表示パネル）と平行な平面（図３中ｘｙ平面）において、端末装置２００が上記の３つのアイコンのうちジョブ表示アイコン１６１ａに最も近い場合には、ＭＦＰ１００は、（ａ）に示すように、ジョブ表示アイコン１６１ａのメニュー画面を、端末装置２００に表示する画面として決定する。端末装置２００が上記の３つのアイコンのうち設定確認アイコン１６１ｂに最も近い場合には、ＭＦＰ１００は、（ｂ）に示すように、設定確認アイコン１６１ｂのメニュー画面を、端末装置２００に表示する画面として決定する。端末装置２００が上記の３つのアイコンのうち応用設定アイコン１６１ｃに最も近い場合には、（ｃ）に示すように、応用設定アイコン１６１ｃのメニュー画面を、端末装置２００に表示する画面として決定する。
【００６０】
［端末装置に表示する画面の決定方法］
次に、端末装置２００に表示する画面の第１〜第４の決定方法について詳細に説明する。
【００６１】
図７は、端末装置２００に表示する画面の第１の決定方法を説明する図である。
【００６２】
図７を参照して、第１の決定方法では、ＭＦＰ１００は、操作パネル１５０に表示している画面のアイコンと、端末装置２００（ここでは端末装置２００の中心点）との距離に基づいて、端末装置２００に表示する画面を決定する。たとえば、操作パネル１５０がボタンＡおよびＢという２つのアイコンを表示している場合、ＭＦＰ１００は、端末装置２００とボタンＡとの距離ｄ１と、端末装置２００とボタンＢとの距離ｄ２とを比較する。ＭＦＰ１００は、距離ｄ１およびｄ２のうち短い方の距離に対応するアイコンを特定し、特定したアイコンのメニュー画面を、端末装置２００に表示する画面として決定する。ＭＦＰ１００は決定した画面のデータを端末装置２００へ送信し、端末装置２００はＭＦＰ１００から受信したデータに基づく画面を操作表示部２５０に表示する。
【００６３】
図８は、端末装置２００に表示する画面の第１の決定方法を採用した場合における、端末装置２００の位置と端末装置２００に表示される画面との関係を示す図である。
【００６４】
図８を参照して、端末装置２００が位置Ｐ１または位置Ｐ２に存在する場合、端末装置２００とボタンＡとの距離は端末装置２００とボタンＢとの距離よりも短い。したがって、ＭＦＰ１００は、ボタンＡのメニュー画面であるサブメニューＡを端末装置２００に表示する。一方、端末装置２００が位置Ｐ３に存在する場合、端末装置２００とボタンＢとの距離は端末装置２００とボタンＡとの距離よりも短い。したがって、ＭＦＰ１００は、ボタンＢのメニュー画面であるサブメニューＢを端末装置２００に表示する。
【００６５】
図９は、端末装置２００に表示する画面の第２の決定方法を説明する図である。
【００６６】
図９を参照して、第２の決定方法では、ＭＦＰ１００は、操作パネル１５０に表示している画面のアイコンと画面の外縁（端末装置２００が最も近い外縁の辺）との距離と、画面の外縁と端末装置２００との距離とに基づいて、端末装置２００に表示する画面を決定する。たとえば、操作パネル１５０がボタンＡおよびＢという２つのアイコンを表示している場合、ＭＦＰ１００は、ボタンＡと、端末装置２００が最も近い外縁である外縁Ｌ１との距離ｄ３と、画面の外縁Ｌ１と端末装置２００との距離ｄ５との和（ｄ３＋ｄ５）と、ボタンＢと画面の外縁Ｌ１との距離ｄ４と、画面の外縁Ｌ１と端末装置２００との距離ｄ５との和（ｄ４＋ｄ５）とを比較する。ＭＦＰ１００は、和（ｄ３＋ｄ５）および和（ｄ４＋ｄ５）のうち短い方の距離に対応するアイコンを特定し、特定したアイコンのメニュー画面を、端末装置２００に表示する画面として決定する。ＭＦＰ１００は決定した画面のデータを端末装置２００へ送信し、端末装置２００はＭＦＰ１００から受信したデータに基づく画面を操作表示部２５０に表示する。
【００６７】
図１０は、端末装置２００に表示する画面の第２の決定方法を採用した場合における、端末装置２００の位置と端末装置２００に表示される画面との関係を示す図である。
【００６８】
図１０を参照して、端末装置２００が位置Ｐ１に存在する場合、ボタンＡと画面の外縁Ｌ２との距離と、画面の外縁Ｌ２と端末装置２００との距離との和は、ボタンＢと画面の外縁Ｌ２との距離と、画面の外縁Ｌ２と端末装置２００との距離との和よりも短い。したがって、ＭＦＰ１００は、ボタンＡのメニュー画面であるサブメニューＡを端末装置２００に表示する。一方、端末装置２００が位置Ｐ２またはＰ３に存在する場合、ボタンＢと画面の外縁Ｌ３との距離と、画面の外縁Ｌ３と端末装置２００との距離との和は、ボタンＡと画面の外縁Ｌ３との距離と、画面の外縁Ｌ３と端末装置２００との距離との和よりも短い。したがって、ＭＦＰ１００は、ボタンＢのメニュー画面であるサブメニューＢを端末装置２００に表示する。
【００６９】
なお、ＭＦＰ１００は、操作パネル１５０と端末装置２００との距離が一定値以下である場合に、操作パネル１５０の表示画面に関する画面を端末装置２００に表示し（端末装置２００に表示する画面を決定し）、操作パネル１５０と端末装置２００との距離が一定値より大きい場合に、操作パネル１５０の表示画面に関する画面を端末装置２００に表示しなくてもよい（端末装置２００に表示する画面を決定しなくてもよい）。
【００７０】
図１１は、端末装置２００に表示する画面の第３の決定方法を説明する図である。
【００７１】
図１１を参照して、第３の決定方法では、上述の第１または第２の決定方法において、アイコンと端末装置２００とを結ぶ直線が、仮想直線に対してなす角度にさらに基づいて、端末装置２００に表示する画面を決定する。たとえば、以下の状況を想定する。操作パネル１５０は、ボタンＡおよびＢという２つのアイコンを表示している。ＭＦＰ１００は、ボタンＡのメニュー画面を端末装置２００に表示する角度範囲θ１（たとえば−３０度〜３０度）と、ボタンＢのメニュー画面を端末装置２００に表示する角度範囲θ２（たとえば３５度〜１１０度）とを、操作パネル１５０および端末装置２００に表示する画面のデータとともにあらかじめ制御部１０１のＲＯＭなどに記憶している。角度範囲θ１およびθ２の各々は、たとえば、操作パネル１５０の操作表示部１５１と平行な平面（図３中ｘｙ平面）内の任意の仮想直線ＳＬに対する角度範囲として設定されている。
【００７２】
上述の場合、ＭＦＰ１００は、ボタンＡと端末装置２００（端末装置２００の中心点）とを結ぶ直線が仮想直線ＳＬに対してなす角度が、角度範囲θ１内にある場合にのみ、ボタンＡのメニュー画面を端末装置２００に表示する。ＭＦＰ１００は、ボタンＢと端末装置２００とを結ぶ直線が仮想直線ＳＬに対してなす角度が、角度範囲θ２内にある場合にのみ、ボタンＢのメニュー画面を端末装置２００に表示する。たとえば、端末装置２００が位置Ｐ４に存在する場合、ボタンＡと端末装置２００とを結ぶ直線Ｌ４が仮想直線ＳＬとなす角度（約８０度）は、角度範囲θ１の範囲外となるので、端末装置２００がボタンＢよりもボタンＡに近い位置にたとえ存在していたとしても、ＭＦＰ１００は、ボタンＡのメニュー画面を端末装置２００に表示しない。
【００７３】
図１２は、端末装置２００に表示する画面の第４の決定方法を説明する図である。
【００７４】
図１２を参照して、第４の決定方法では、上述の第１または第２の決定方法において、複数のアイコンの各々の優先度にさらに基づいて、端末装置２００に表示する画面を決定する。たとえば、以下の状況を想定する。操作パネル１５０がボタンＡおよびＢという２つのアイコンを表示している。ＭＦＰ１００は、ボタンＡおよびＢの各々の優先度を、操作パネル１５０および端末装置２００に表示する画面のデータとともにあらかじめ制御部１０１のＲＯＭなどに記憶している。ボタンＢの優先度はボタンＡの優先度よりも高い。
【００７５】
上述の場合において、たとえば位置Ｐ４に端末装置２００が存在するときは、ボタンＡと端末装置２００との距離ｄ１の方がボタンＢと端末装置２００との距離ｄ２よりも短いにもかかわらず、距離ｄ１と距離ｄ２の差が所定値Ｘよりも小さい（または和（ｄ３＋ｄ５）の方が和（ｄ４＋ｄ５）よりも短いにもかかわらず、和（ｄ３＋ｄ５）と和（ｄ４＋ｄ５）との差が所定値Ｘよりも小さい）。このような場合、ＭＦＰ１００は、優先度の高い方のアイコンであるボタンＢのメニュー画面を端末装置２００に表示する。所定値Ｘの値は、２つのアイコンの優先度の差に応じて設定されてもよいし、一定値でもよい。また、特定の領域に端末装置２００が存在する場合には、常に特定のアイコンに関する画面を優先的に端末装置２００に表示してもよい。
【００７６】
ＭＦＰ１００は、第１〜第４の決定方法のいずれかを用いて、端末装置２００に表示する画面を決定する。ＭＦＰ１００は、第１〜第４の決定方法以外の方法で、端末装置２００に表示する画面を決定してもよい。
【００７７】
［位置関係情報の取得方法］
続いて、位置関係情報の取得方法の具体例について説明する。
【００７８】
図１３は、モーションセンサーを用いた場合の位置関係情報の取得方法の一例を説明する図である。
【００７９】
図１３を参照して、ＭＦＰ１００と端末装置２００との連携が開始すると、端末装置２００の操作表示部２５０には、（ａ）に示すように、端末装置２００を操作パネル１５０の真上に移動してＯＫボタンを押下することを求めるメッセージ１６３ａと、ＯＫボタン１６３ｂとが表示される。ユーザーによって端末装置２００が操作パネル１５０の真上に移動されてＯＫボタン１６３ｂが押下されると、その時の端末装置２００の位置が基準点（操作パネル１５０の基準位置）に設定される。その後（ｂ）に示すように、端末装置２００が位置Ｐ１３に移動すると、端末装置２００が搭載するモーションセンサーは、基準点に基づく端末装置２００の相対位置を検知し、端末装置２００は、モーションセンサーによって検知した相対位置を位置関係情報として生成する。ＭＦＰ１００は、操作パネル１５０に表示している画面の情報と、位置関係情報とに基づいて、端末装置２００に表示する画面（ここでは応用設定アイコン１６１ｃのメニュー画面）を決定する。その結果、ＭＦＰ１００は、応用設定アイコン１６１ｃのメニュー画面を端末装置２００の操作表示部２５０に表示する。
【００８０】
図１４は、ＧＰＳ受信機を用いた場合の位置関係情報の取得方法の一例を説明する図である。
【００８１】
図１４を参照して、ＭＦＰ１００と端末装置２００との連携が開始すると、ＧＰＳ受信機を搭載した端末装置２００は、図示しないＧＰＳ衛星から自機の位置情報（ここでは位置Ｐ１３の情報）を取得し、（ａ）に示すように、サーバーＰＣ３００へ送信する。サーバーＰＣ３００は、ＭＦＰ１００（操作パネル１５０）の位置情報を固定記憶装置などにあらかじめ記憶している。サーバーＰＣ３００は、端末装置２００の位置情報を受信すると、ＭＦＰ１００の位置情報を端末装置２００へ通知する。端末装置２００は、サーバーＰＣ３００から受信したＭＦＰ１００の位置情報と、自機の位置情報とに基づいて位置関係情報を生成し、生成した位置関係情報をＭＦＰ１００へ送信する。ＭＦＰ１００は、操作パネル１５０に表示している画面の情報と、位置関係情報とに基づいて、端末装置２００に表示する画面（ここでは応用設定アイコン１６１ｃのメニュー画面）を決定する。その結果、（ｂ）に示すように、ＭＦＰ１００は、応用設定アイコン１６１ｃのメニュー画面を端末装置２００に表示する。
【００８２】
上述の方法の他、端末装置２００が、ＧＰＳ衛星から取得した自機の位置情報をＭＦＰ１００へ送信し、ＭＦＰ１００が、制御部１０１のＲＯＭなどが記憶しているＭＦＰ１００の位置情報と、端末装置２００の位置情報とに基づいて、位置関係情報を生成してもよい。
【００８３】
［３次元の位置関係情報に基づく場合の表示システムの動作］
次に、３次元の位置関係情報に基づく場合の表示システムの動作について説明する。
【００８４】
図１５は、３次元の位置関係情報に基づく場合の表示システムの動作を説明する図である。
【００８５】
図１５を参照して、２次元での（ｚ軸を無視したｘｙ平面内の）位置関係情報に基づいて表示システムが動作する場合、端末装置２００の表示画面は（ａ）に示すように変化する。すなわち、３つのアイコンのうちジョブ表示アイコン１６１ａに最も近い位置である位置Ｐ１１に端末装置２００が存在する場合には、端末装置２００にはジョブ表示アイコン１６１ａのメニュー画面が表示される。設定確認アイコン１６１ｂに最も近い位置である位置Ｐ１２に端末装置２００が存在する場合には、端末装置２００には設定確認アイコン１６１ｂのメニュー画面が表示される。応用設定アイコン１６１ｃに最も近い位置である位置Ｐ１３に端末装置２００が存在する場合には、端末装置２００には応用設定アイコン１６１ｃのメニュー画面が表示される。
【００８６】
一方、３次元の（ｘ軸、ｙ軸、およびｚ軸を考慮した）位置関係情報に基づいて表示システムが動作する場合、端末装置２００の表示画面は以下のように変化する。ジョブ表示アイコン１６１ａの真上の位置である位置Ｐ１４に端末装置２００が移動した場合、位置Ｐ１４は、３つのアイコンのうちジョブ表示アイコン１６１ａに最も近い位置であるため、端末装置２００には、（ｂ）に示すようにジョブ表示アイコン１６１ａのメニュー画面が表示される。設定確認アイコン１６１ｂの真上の位置である位置Ｐ１５に端末装置２００が移動した場合、位置Ｐ１５は、３つのアイコンのうち設定確認アイコン１６１ｂに最も近い位置であるため、端末装置２００には、（ｃ）に示すように設定確認アイコン１６１ｂのメニュー画面が表示される。応用設定アイコン１６１ｃの真上の位置である位置Ｐ１６に端末装置２００が移動した場合、位置Ｐ１６は、３つのアイコンのうち応用設定アイコン１６１ｃに最も近い位置であるため、端末装置２００には、（ｄ）に示すように応用設定アイコン１６１ｃのメニュー画面が表示される。
【００８７】
［端末装置に画面を表示した後の表示システムの動作］
続いて、端末装置２００に画面を表示した後の表示システムの動作について説明する。
【００８８】
図１６は、端末装置２００に画面を表示した後の表示システムの動作を説明する図である。
【００８９】
図１６（ａ）を参照して、端末装置２００が位置Ｐ１１に存在する場合、応用設定アイコン１６１ｃのメニュー画面（応用設定メニュー）が表示される。端末装置２００がこの状態で表示画面の操作を受け付けた場合、端末装置２００は、メニュー画面を更新することを保留する。さらに、端末装置２００が位置関係情報の変更に伴うメニュー画面の更新を保留している場合において、端末装置２００が表示しているメニュー画面を解除する操作が行なわれたときは、端末装置２００は更新後のメニュー画面を表示する。
【００９０】
たとえば、端末装置２００に表示された応用設定アイコン１６１ｃのメニュー画面において、応用設定メニューを右方向にスクロールさせるアイコン１６７（右アイコン）の操作を端末装置２００が受け付けた場合、ＭＦＰ１００は、応用設定メニューを右方向にスクロールした画面のデータを記憶部１１１から取得し、取得した画面のデータを端末装置２００へ送信する。その結果、端末装置２００は、応用設定メニューを右方向にスクロールした画面を表示する。さらに端末装置２００は、応用設定アイコン１６１ｃのメニュー画面からのメニュー画面の更新を保留する。
【００９１】
たとえば（ａ）において、端末装置２００がアイコン１６７の操作を受け付けた後で、（ｂ）に示すように、端末装置２００が位置Ｐ１２へ移動された場合、端末装置２００は、位置Ｐ１２への移動に伴うメニュー画面の更新（設定確認アイコン１６１ｂのメニュー画面への更新）を保留し、応用設定メニューを右方向にスクロールした画面（応用設定アイコン１６１ｃのメニュー画面）を表示し続ける。
【００９２】
さらに（ｂ）において、応用設定アイコン１６１ｃのメニュー画面の表示を解除するアイコンである「閉じる」アイコン１６９が押下された場合、端末装置２００は、（ｃ）に示すように、位置Ｐ１２への移動に伴う更新画面である、設定確認アイコン１６１ｂのメニュー画面を表示する。メニュー画面の表示を解除するアイコンは、「閉じる」アイコン１６９の他、設定などを確定させる確定キーや、データ送信キーなどであってもよい。
【００９３】
［表示システムの動作のフローチャート］
図１７は、表示システムの動作を示すフローチャート（シーケンス図）である。なお、このフローチャートは、ＭＦＰ１００の制御部１０１のＲＯＭや端末装置２００の制御部２０１のＲＯＭなどに記憶されたプログラムに基づいて、制御部１０１のＣＰＵおよび制御部２０１のＣＰＵが実行するものである。
【００９４】
図１７を参照して、たとえば、端末装置２００がＭＦＰ１００と通信可能な状態（たとえば、ＭＦＰ１００と無線通信可能な範囲内に端末装置２００が存在する状態や、端末装置２００がＭＦＰ１００と有線接続されている状態）において、端末装置２００にインストールされた連携用のアプリケーションが起動された場合などに、ＭＦＰ１００と端末装置２００との連携が開始する（Ｓ１）。ＭＦＰ１００と端末装置２００との連携が開始すると、制御部２０１は、位置関係情報を取得し、ＭＦＰ１００へ送信する（Ｓ３）。次に制御部１０１は、端末装置２００から位置関係情報を受信したか否かを判別する（Ｓ５）。
【００９５】
ステップＳ５において、位置関係情報を受信したと判別した場合（Ｓ５でＹｅｓ）、制御部１０１は、操作パネル１５０が現在表示している画面の情報と、位置関係情報とに基づいて、端末装置２００に表示するメニュー画面を決定し（Ｓ７）、決定したメニュー画面のデータを端末装置２００へ送信する（Ｓ９）。一方、ステップＳ５において、位置関係情報を受信しないと判別した場合（Ｓ５でＮｏ）、制御部２０１は、位置関係情報を取得し、ＭＦＰ１００へ再度送信する（Ｓ３）。
【００９６】
ステップＳ９においてメニュー画面のデータを受信すると、制御部２０１は、受信したデータに基づいてメニュー画面を操作表示部２５０に表示する（Ｓ１０）。続いて、制御部１０１および２０１は、操作パネル１５０が現在表示している画面の情報および位置関係情報のうち少なくともいずれか一方が変化したか否かを判別する（Ｓ１１）。
【００９７】
ステップＳ１１において、変化したと判別した場合（Ｓ１１でＹｅｓ）、制御部１０１は、変化後の操作パネル１５０が現在表示している画面の情報および位置関係情報に基づいて、端末装置２００に表示するメニュー画面（更新画面）を決定する（Ｓ１３）。次に制御部１０１は、前回決定したメニュー画面と今回決定したメニュー画面とが異なるか否かを判別する（Ｓ１５）。
【００９８】
ステップＳ１５において、異なると判別した場合（Ｓ１５でＹｅｓ）、制御部１０１は、今回決定したメニュー画面のデータを端末装置２００へ送信し、制御部２０１は、メニュー画面の更新を保留していない場合には、受信したデータに基づいて操作表示部２５０に表示するメニュー画面を更新する（Ｓ１７）。その後、制御部２０１はステップＳ１９の処理へ進む。
【００９９】
ステップＳ１１において、変化しないと判別した場合（Ｓ１１でＮｏ）、またはステップＳ１５において、同じであると判別した場合（Ｓ１５でＮｏ）、制御部２０１はステップＳ１９の処理へ進む。
【０１００】
ステップＳ１９において、制御部２０１は、端末装置２００の表示画面において、操作を受け付けたか否かを判別する（Ｓ１９）。ステップＳ１９において、操作を受け付けたと判別した場合（Ｓ１９でＹｅｓ）、制御部２０１は、端末装置２００が現在表示しているメニュー画面の更新を保留する（Ｓ２１）。続いて制御部２０１は、端末装置２００の表示画面において、メニュー画面の表示を解除する操作を受け付けたか否かを判別する（Ｓ２３）。
【０１０１】
ステップＳ２３において、解除する操作を受け付けたと判別した場合（Ｓ２３でＹｅｓ）、制御部２０１は、メニュー画面の更新の保留を解除し、更新を保留しているメニュー画面がある場合には、そのメニュー画面を表示する（Ｓ２５）。その後、制御部１０１および２０１は、ステップＳ１１の処理へ進む。
【０１０２】
ステップＳ１９において、操作を受け付けないと判別した場合（Ｓ１９でＮｏ）、またはステップＳ２３において、解除する操作を受け付けないと判別した場合（Ｓ２３でＮｏ）、制御部１０１および２０１は、ステップＳ１１の処理へ進む。
【０１０３】
［変形例］
操作パネル１５０に表示している画面の構成要素であって、画面変更の指示を受け付ける構成要素は、操作パネル１５０が現在表示している画面の上または下の階層の画面を表示する際に押下される上述のアイコンの他、操作パネル１５０が現在表示している画面と同じ階層の画面を表示する際に押下されるタブであってもよい。
【０１０４】
図１８は、本発明の変形例における、操作パネル１５０に対する端末装置２００の位置と、端末装置２００が表示する画面との関係を模式的に示す図である。
【０１０５】
図１８（ａ）を参照して、操作パネル１５０が表示している画面に、実行中タブ１６５ａ、履歴タブ１６５ｂ、および通信リストタブ１６５ｃなどのタブ（ソフトウェアキー、構成要素）が含まれている場合を想定する。これらのタブは、操作パネル１５０の画面変更の指示を受け付けるものである。具体的には、実行中タブ１６５ａが押下された場合には、操作パネル１５０は、ＭＦＰ１００で現在実行しているジョブの一覧の画面を表示する。履歴タブ１６５ｂが押下された場合には、操作パネル１５０は、ＭＦＰ１００で実行完了したジョブの履歴を示す画面を表示する。通信リストタブ１６５ｃが押下された場合には、操作パネル１５０は、外部機器との通信を伴うジョブ（ファイル送受信やファクシミリ送受信に関するジョブ）の一覧の画面を表示する。
【０１０６】
ＭＦＰ１００は、実行中タブ１６５ａ、履歴タブ１６５ｂ、および通信リストタブ１６５ｃの各々の位置と、端末装置２００との位置関係に関する位置関係情報に基づいて、端末装置２００に表示する画面を決定する。ＭＦＰ１００は、上記の３つのタブのうち端末装置２００が最も近いタブを特定し、そのタブを押下した場合に操作パネル１５０に表示される画面と同一の画面を、端末装置２００に表示する画面として決定する。
【０１０７】
具体的には、端末装置２００が上記の３つのタブのうち実行中タブ１６５ａに最も近い場合には、ＭＦＰ１００は、ＭＦＰ１００で現在実行しているジョブの一覧の画面を、端末装置２００に表示する画面として決定する。端末装置２００が上記の３つのタブのうち履歴タブ１６５ｂに最も近い場合には、ＭＦＰ１００は、（ｂ）に示すように、ＭＦＰ１００で実行完了したジョブの履歴を示す画面を、端末装置２００に表示する画面として決定する。端末装置２００が上記の３つのタブのうち通信リストタブ１６５ｃに最も近い場合には、（ｃ）に示すように、ＭＦＰ１００は、外部機器との通信を伴うジョブの一覧の画面を、端末装置２００に表示する画面として決定する。
【０１０８】
［実施の形態の効果］
本実施の形態によれば、ＭＦＰ１００と端末装置２００の位置関係に基づいて、端末装置２００にサブメニューを表示することができる。ＭＦＰ１００の操作パネル１５０にアイコンが表示されている場合には、１階層低いメニュー画面(サブメニュー画面)を端末装置２００に表示することができ、操作パネル１５０にタブなどが表示されている場合には、同一の階層（横階層）のメニュー画面を端末装置２００に表示することができる。これによりユーザーは、操作パネル１５０上でのアイコン操作を行なうこと無くサブメニューを表示することができ、操作パネルのユーザビリティを向上することができる。
【０１０９】
また、端末装置２００で画面の操作を受け付けた場合に、端末装置２００がその操作の情報をＭＦＰ１００に送信し、ＭＦＰ１００がその操作の情報に基づく処理を実行し、実行した処理に伴う更新画面に関する情報を端末装置２００へ送信するので、端末装置２００から行った操作によってＭＦＰ１００の動作を制御することができる。
【０１１０】
さらに、端末装置２００で画面の操作を受け付けた場合に、端末装置２００の画面の更新を保留することにより、端末装置２００の操作中に端末装置２００が表示しているメニュー画面が変わることを防ぐことができる。
【０１１１】
［その他］
位置関係情報は、端末装置２００が生成する場合の他、ＭＦＰ１００が生成してもよい。
【０１１２】
端末装置２００に表示する画面は、任意のものであればよく、操作パネル１５０の表示画面に含まれるアイコンまたはタブのメニュー画面の他、アイコンまたはタブの機能を説明する画面（ヘルプ画面）などであってもよい。
【０１１３】
ＭＦＰ１００が画面のデータを端末装置２００に送信し、端末装置２００がＭＦＰ１００から受信したデータに基づく画面を操作表示部２５０に表示する場合の他、ＭＦＰ１００が画面に関する情報（画面のＩＤなど）を端末装置２００に送信し、端末装置２００がＭＦＰ１００から受信した情報に基づいて画面を作成し（記憶部２０７などに記憶されている画面のデータから画面を選択し）、作成した画面を操作表示部２５０に表示してもよい。
【０１１４】
上述の実施の形態は適宜組み合わせることができる。たとえば、図１８に示すようなタブを含む画面を端末装置２００が表示している場合に、図１５（ｂ）〜（ｄ）に示すように示すような３次元の位置関係情報に基づいて表示システムが動作してもよいし、図１６（ｂ）に示すように、位置関係情報の変更に伴うメニュー画面の更新を保留してもよい。
【０１１５】
上述の実施の形態における処理は、ソフトウェアにより行なっても、ハードウェア回路を用いて行なってもよい。また、上述の実施の形態における処理を実行するプログラムを提供することもできるし、そのプログラムをＣＤ−ＲＯＭ、フレキシブルディスク、ハードディスク、ＲＯＭ、ＲＡＭ、メモリカードなどの記録媒体に記録してユーザーに提供することにしてもよい。プログラムは、ＣＰＵなどのコンピューターにより実行される。また、プログラムはインターネットなどの通信回線を介して、装置にダウンロードするようにしてもよい。
【０１１６】
上述の実施の形態は、すべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
【符号の説明】
【０１１７】
１００  ＭＦＰ
１０１，２０１  制御部
１０１ａ，２０１ａ  制御プログラム
１０３  画像処理部
１０５，２０３  転送部
１０７  スキャナ部
１０９  印刷部
１１１，２０７  記憶部
１５０  操作パネル
１５１，２５０  操作表示部
１５３  テンキー
１５５  ハードウェアキー
１６１ａ  ジョブ表示アイコン
１６１ｂ  設定確認アイコン
１６１ｃ  応用設定アイコン
１６３ａ  メッセージ
１６３ｂ  ＯＫボタン
１６５ａ  実行中タブ
１６５ｂ  履歴タブ
１６５ｃ  通信リストタブ
１６７，１６９  アイコン
２００，２００ａ，２００ｂ  端末装置
２０５  端末通信部
３００  サーバーＰＣ
４００  ネットワーク
Ｐ１〜Ｐ４，Ｐ１１〜Ｐ１６  位置
【図１】
2013109614.tif 000003
【図２】
2013109614.tif 000004
【図３】
2013109614.tif 000005
【図４】
2013109614.tif 000006
【図５】
2013109614.tif 000007
【図６】
2013109614.tif 000008
【図７】
2013109614.tif 000009
【図８】
2013109614.tif 000010
【図９】
2013109614.tif 000011
【図１０】
2013109614.tif 000012
【図１１】
2013109614.tif 000013
【図１２】
2013109614.tif 000014
【図１３】
2013109614.tif 000015
【図１４】
2013109614.tif 000016
【図１５】
2013109614.tif 000017
【図１６】
2013109614.tif 000018
【図１７】
2013109614.tif 000019
【図１８】
2013109614.tif 000020