(57)【要約】【課題】携帯端末と画像形成装置とを組み合わせて用いる場合に、一方の側だけを操作することによって動作を行わせる。【解決手段】アイコンＩ２Ａ、Ｉ２Ｂ、Ｉ２Ｃにおいては、仮想表示部２１ＡＶ、２１ＢＶ、２１ＣＶがそれぞれ表示される。仮想表示部２１ＡＶには、アイコンＩＳＡ１〜ＩＳＡ４が表示されている。制御部は、仮想表示部２１ＡＶ内におけるユーザーの操作を認識し、この操作を、仮想表示部２１ＡＶ内のアイコンに対しての操作と認識することができる。制御部は、この操作データを携帯端末２Ａ側の制御部に送信し、該当するアイコンが操作された場合と同様の動作を行わせ、この際にアプリケーションＡ１の実行時にタッチパネルディスプレイで表示させる画像をタッチパネルで表示させると同時に、この画像を新たな端末側画像データとして送信する。【選択図】図５
2019155798.tif 000002
【特許請求の範囲】
【請求項１】
端末側タッチパネルディスプレイが設けられた携帯端末と接続されて使用される画像形成装置であって、
前記携帯端末との間で通信を行ないデータの授受を行う通信部と、
自身の操作のために用いられる装置側タッチパネルディスプレイと、
前記通信部を介して、前記携帯端末において前記端末側タッチパネルディスプレイにおいて表示される内容である端末側画像データを前記携帯端末側から受信し、前記装置側タッチパネルディスプレイに対してユーザーによって操作された内容に対応する装置側操作データを前記携帯端末側に送信し、
前記装置側操作データを用いて前記携帯端末におけるアプリケーションを実行させる制御部と、
を具備することを特徴とする画像形成装置。
【請求項２】
前記制御部は、
前記通信部を介して、前記装置側タッチパネルディスプレイにおいて表示される内容である装置側画像データを前記携帯端末側に送信し、前記端末側タッチパネルディスプレイに対してユーザーによって操作された内容に対応する端末側操作データを前記携帯端末側から受信し、
前記端末側操作データを用いて、自身の設定を行うことを特徴とする請求項１に記載の画像形成装置。
【請求項３】
前記制御部は、
接続された前記携帯端末を前記装置側タッチパネルディスプレイ中でアイコンとして表示させることを特徴とする請求項１又は２に記載の画像形成装置。
【請求項４】
前記制御部は、
前記携帯端末における前記アプリケーションに対応したアイコンを、前記携帯端末に対応したアイコン中に設けられた仮想表示部中に表示させることを特徴とする請求項３に記載の画像形成装置。
【請求項５】
媒体に画像を形成して出力する印刷機能と、画像データの授受を外部との間で行う機能とを具備する複合機であることを特徴とする請求項１から請求項４までのいずれか１項に記載の画像形成装置。
【請求項６】
前記携帯端末と、請求項４又は５に記載の画像形成装置とを具備することを特徴とする画像形成システム。
【請求項７】
前記端末側タッチパネルディスプレイにおいて、前記画像形成装置の接続の有無がアイコンとして表示されることを特徴とする請求項６に記載の画像形成システム。
【請求項８】
複数の前記携帯端末を具備し、
複数の前記携帯端末における前記端末側タッチパネルディスプレイにおいて、自身以外の前記携帯端末の接続の有無がアイコンとして表示されることを特徴とする請求項６又は７に記載の画像形成システム。
【請求項９】
前記制御部は、複数の前記携帯端末の各々における他の前記携帯端末からの自身の認識の許可の有無を認識し、当該許可がない前記携帯端末に対応するアイコンを当該携帯端末以外の前記携帯端末における前記端末側タッチパネルディスプレイにおいて表示させないことを特徴とする請求項８に記載の画像形成システム。
【請求項１０】
複数の前記携帯端末の各々において実行される前記アプリケーションを前記装置側タッチパネルディスプレイにおいてアイコンとして表示させる際に、
前記制御部は、  
異なる前記携帯端末の間で重複する前記アプリケーションを認識し、前記装置側タッチパネルディスプレイにおいて、当該アプリケーションに対応するアイコンを他のアプリケーションに対応するアイコンと差別化して表示させることを特徴とする請求項８又は９に記載の画像形成システム。
【請求項１１】
前記制御部は、複数の前記携帯端末のうちの一つである第１の携帯端末から前記端末側画像データを入手して複数の前記携帯端末のうちの他の一つである第２の携帯端末に送信した後で、当該第２の携帯端末から前記端末側操作データを入手して前記第１の携帯端末に送信し、
前記第１の携帯端末は、当該端末側操作データに基づく動作をすることを特徴とする請求項８から請求項１０までのいずれか１項に記載の画像形成システム。
【請求項１２】
前記第２の携帯端末における前記端末側タッチパネルディスプレイにおいて、前記第１の携帯端末におけるアプリケーションに対応したアイコンが表示されることを特徴とする請求項１１に記載の画像形成システム。
【請求項１３】
前記制御部は、
前記第２の携帯端末における前記端末側タッチパネルディスプレイにおいて表示される前記第１の携帯端末におけるアプリケーションに対応した前記アイコンを、前記装置側タッチパネルディスプレイに対する操作によって選択させることを特徴とする請求項１２に記載の画像形成システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、携帯端末と組み合わせて使用することのできる画像形成装置に関する。また、この画像形成装置と携帯端末とが組み合わせて用いられた画像形成システムに関する。
【背景技術】
【０００２】
媒体（用紙）に画像を形成して出力する画像形成装置として、ネットワークを介した通信を行うことができる複合機（ＭＦＰ：Ｍｕｌｔｉ  Ｆｕｎｃｔｉｏｎ  Ｐｒｉｎｔｅｒ）は、特に様々な動作をすることができる。一方、スマートフォン等の携帯端末もネットワークを介して様々な動作をすることができるが、携帯端末は小型であるために、例えば媒体に画像を形成して出力させるような動作は行うことができない。このため、携帯端末と組み合わせて用いることのできるＭＦＰが用いられている。
【０００３】
例えば、特許文献１には、ＭＦＰがＭＦＰを操作するための操作画面とこれに対応するコマンドテーブルをネットワークを介して携帯端末に送信し、携帯端末がこの操作画面を自身で表示させる技術が記載されている。この際、操作画面においては、携帯端末上での操作が容易なように複数のアイコンが用いられ、ユーザーは、この操作画面に対して携帯端末における通常のアプリを実行させる際と同様のアイコンに対する動作（ドラッグ等）を行うことによって、この操作画面に対する操作を行うことができる。
【０００４】
その後、携帯端末は、この操作画面に対する操作を認識し、該当する操作に対応したコマンドが入力されたものとして、その旨をＭＦＰ側に送信する。これによって、携帯端末側からＭＦＰを操作することができ、例えば携帯端末側に保存された画像を、ＭＦＰに触れることなしに、ＭＦＰから出力させることができる。特許文献１に記載の技術においては、上記のような多数のアイコンを具備する操作画面のデータを携帯端末側で効率的に表示させることができ、上記の操作を円滑に行わせることができる。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１４−３５７２３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
上記の技術によって、画像形成装置を携帯端末側から操作することが可能となる。しかしながら、例えば、画像形成装置における各種の設定を行う操作は、実際にはユーザーが画像形成装置の傍らに位置し、状況を確認しながら行う必要がある。また、小型の携帯端末に対する操作だけでは、画像形成装置における設定を行うことが容易ではない場合もある。このため、この画像形成装置側における全ての操作を携帯端末側で行うことは実際には困難であった、あるいは操作を携帯端末側で行わせることは適切ではない場合があった。
【０００７】
また、画像形成装置や携帯端末には様々な機種が存在するところ、各機種同士に対応可能な上記のような操作画面等を全ての操作に対応して画像形成装置側で形成することは困難であった。
【０００８】
このため、上記のように携帯端末側から画像形成装置を操作することが可能となった場合においても、実際は、携帯端末と共に画像形成装置側の操作を要する場合が多かった。このため、携帯端末と画像形成装置とを組み合わせて用いる場合に、一方の側だけを操作することによって動作を行わせることのできる技術が望まれた。
【０００９】
本発明はこのような状況に鑑みてなされたものであり、上記課題を解決できる技術を提供することを目的とする。
【課題を解決するための手段】
【００１０】
本発明の画像形成装置は、端末側タッチパネルディスプレイが設けられた携帯端末と接続されて使用される画像形成装置であって、前記携帯端末との間で通信を行ないデータの授受を行う通信部と、自身の操作のために用いられる装置側タッチパネルディスプレイと、前記通信部を介して、前記携帯端末において前記端末側タッチパネルディスプレイにおいて表示される内容である端末側画像データを前記携帯端末側から受信し、前記装置側タッチパネルディスプレイに対してユーザーによって操作された内容に対応する装置側操作データを前記携帯端末側に送信し、前記装置側操作データを用いて前記携帯端末におけるアプリケーションを実行させる制御部と、を具備することを特徴とする。
本発明の画像形成装置において、前記制御部は、前記通信部を介して、前記装置側タッチパネルディスプレイにおいて表示される内容である装置側画像データを前記携帯端末側に送信し、前記端末側タッチパネルディスプレイに対してユーザーによって操作された内容に対応する端末側操作データを前記携帯端末側から受信し、前記端末側操作データを用いて、自身の設定を行うことを特徴とする。
本発明の画像形成装置において、前記制御部は、接続された前記携帯端末を前記装置側タッチパネルディスプレイ中でアイコンとして表示させることを特徴とする。
本発明の画像形成装置において、前記制御部は、前記携帯端末における前記アプリケーションに対応したアイコンを、前記携帯端末に対応したアイコン中に設けられた仮想表示部中に表示させることを特徴とする。
本発明の画像形成装置は、媒体に画像を形成して出力する印刷機能と、画像データの授受を外部との間で行う機能とを具備する複合機であることを特徴とする。
本発明の画像形成システムは、前記携帯端末と、前記画像形成装置とを具備することを特徴とする画像形成システム。
本発明の画像形成システムは、前記端末側タッチパネルディスプレイにおいて、前記画像形成装置の接続の有無がアイコンとして表示されることを特徴とする。
本発明の画像形成システムは、複数の前記携帯端末を具備し、複数の前記携帯端末における前記端末側タッチパネルディスプレイにおいて、自身以外の前記携帯端末の接続の有無がアイコンとして表示されることを特徴とする。
本発明の画像形成システムにおいて、前記制御部は、複数の前記携帯端末の各々における他の前記携帯端末からの自身の認識の許可の有無を認識し、当該許可がない前記携帯端末に対応するアイコンを当該携帯端末以外の前記携帯端末における前記端末側タッチパネルディスプレイにおいて表示させないことを特徴とする。
本発明の画像形成システムは、複数の前記携帯端末の各々において実行される前記アプリケーションを前記装置側タッチパネルディスプレイにおいてアイコンとして表示させる際に、前記制御部は、異なる前記携帯端末の間で重複する前記アプリケーションを認識し、前記装置側タッチパネルディスプレイにおいて、当該アプリケーションに対応するアイコンを他のアプリケーションに対応するアイコンと差別化して表示させることを特徴とする。
本発明の画像形成システムにおいて、前記制御部は、複数の前記携帯端末のうちの一つである第１の携帯端末から前記端末側画像データを入手して複数の前記携帯端末のうちの他の一つである第２の携帯端末に送信した後で、当該第２の携帯端末から前記端末側操作データを入手して前記第１の携帯端末に送信し、前記第１の携帯端末は、当該端末側操作データに基づく動作をすることを特徴とする。
本発明の画像形成システムは、前記第２の携帯端末における前記端末側タッチパネルディスプレイにおいて、前記第１の携帯端末におけるアプリケーションに対応したアイコンが表示されることを特徴とする。
本発明の画像形成システムにおいて、前記制御部は、前記第２の携帯端末における前記端末側タッチパネルディスプレイにおいて表示される前記第１の携帯端末におけるアプリケーションに対応した前記アイコンを、前記装置側タッチパネルディスプレイに対する操作によって選択させることを特徴とする。
【発明の効果】
【００１１】
上記の構成により、携帯端末と画像形成装置とを組み合わせて用いる場合に、一方の側だけを操作することによって動作を行わせることができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の実施の形態に係る画像形成装置の構成を示すブロック図である。
【図２】本発明の実施の形態に係る画像形成システムにおいて用いられる携帯端末の構成を示すブロック図である。
【図３】３台の携帯端末が接続された際の画像形成装置側のタッチパネルディスプレイで表示される画像の例である。
【図４】画像形成装置と接続された際の携帯端末側のタッチパネルディスプレイで表示される画像の例である。
【図５】携帯端末でアプリケーションを実行させた際の画像形成装置側のタッチパネルディスプレイで表示される画像の例である。
【図６】３台の携帯端末が画像形成装置に接続された際の各携帯端末のタッチパネルディスプレイで表示される画像の例（その１）である。
【図７】３台の携帯端末が画像形成装置に接続された際の各携帯端末のタッチパネルディスプレイで表示される画像の例（その２）である。
【図８】画像形成装置に接続された携帯端末において、他の携帯端末におけるアプリケーションを動作させる際のタッチパネルディスプレイで表示される画像の例である。
【図９】画像形成装置に接続された携帯端末間で重複するアプリケーションがある場合において、画像形成装置のタッチパネルディスプレイで表示される画像の例（その１）である。
【図１０】画像形成装置に接続された携帯端末間で重複するアプリケーションがある場合において、画像形成装置のタッチパネルディスプレイで表示される画像の例（その２）である。
【図１１】画像形成装置のタッチパネルディスプレイで表示されるアイコンに対する操作の例を示す図である。
【発明を実施するための形態】
【００１３】
以下、本発明を実施するための形態について図面を参照して説明する。実施の形態となる画像形成装置は、携帯端末と組み合わせて使用される。両者は、近距離無線通信（ｂｌｕｅｔｏｏｔｈやＷｉ  Ｆｉ  Ｄｉｒｅｃｔ（共に登録商標）等）で接続される。画像形成装置、携帯端末は共にタッチパネルディスプレイを具備し、ユーザは、タッチパネルディスプレイ上に表示されたアイコン等を操作することによって、双方における各種の操作を行うことができる。
【００１４】
図１は、画像形成装置１の構成を示す図である。この画像形成装置１は、印刷機能、スキャナー機能、ファクシミリ機能等を具備する複合機であり、これらの各機能において用いられる各種の構成要素を具備する。また、携帯端末との間で、画像データ等、各種のデータのやりとりをすることもできる。ただし、これらの各機能に関わる構成要素は従来より知られる複合機と同様であるため、これらの構成要素についての記載は図１では省略されている。一方、この画像形成装置１においては、その全体の制御、あるいは近距離通信機能を用いて接続された携帯端末の制御に特徴を有するため、図１では、これらの制御に関わる構成要素のみが示されている。
【００１５】
ＣＰＵを具備する制御部（装置側制御部）１０は、タッチパネルディスプレイ（装置側タッチパネルディスプレイ）１１に、操作のために用いられる画像を含む各種の画像を表示させることができる。また、制御部１０は、タッチパネルディスプレイ１１の表面においてユーザーが触れた位置を認識することができ、これによってユーザーによって操作された内容を認識することができる。また、タッチパネルディスプレイ１１とは別に、複数の操作キーから構成される操作部１２も設けられ、制御部１０は、ユーザーによる操作部１２を介した操作も受け付ける。タッチパネルディスプレイ１１を介した操作、操作部１２を介した操作は、内容に応じて適宜設定される。例えば、コピー機能、スキャナー機能、ファクシミリ機能のいずれかを選択するための操作キーは、操作部１２に設けられ、タッチパネルディスプレイ１１側には、ここで選択された操作に応じたメニュー画面が表示される。また、コピー機能やファクシミリの送信機能をスタートさせるスタートキー（スタートボタン）や装置のリセットボタンも操作部１２に設けられる。一方、タッチパネルディスプレイ１１においては、画面の階層に応じて表示される操作キーは変遷し、例えば画像形成装置１における各部の詳細な設定を行わせるための操作キーは、タッチパネルディスプレイ１１における下層側の画面において設けられる。また、この画像形成装置１の動作を行うに際して必要となるデータや出力させるデータを記憶する記憶部１３も設けられる。
【００１６】
また、携帯端末と通信を行うためのインターフェースである近距離通信部（通信部）１４が設けられる。近距離通信部１４は、ｂｌｕｅｔｏｏｔｈやＷｉ  Ｆｉ  Ｄｉｒｅｃｔ（共に登録商標）等の無線通信規格に従う無線通信を行ない、これらの間で各種のデータのやりとりを行う。この際、通信が行われた携帯端末の識別情報を入手し、その接続の認証を行うための認証処理部１５も設けられる。ここで、この識別情報より、制御部１０は、接続された携帯端末の型式（機種）も認識することができる。これらの動作のために必要となる情報は記憶部１３に記憶されている。
【００１７】
図２は、この画像形成装置１と無線通信により接続される携帯端末２の構成を示す図である。携帯端末２においては、通話を行うための機能、撮像機能等が設けられているが、前記の画像形成装置１の場合と同様に、ここでは本願発明に関連する構成要素のみが記載されている。携帯端末２側においても、画像形成装置１側と同様に、全体の制御を行う制御部（端末側制御部）２０、入出力を行うためのタッチパネルディスプレイ（端末側タッチパネルディスプレイ）２１、各種のデータを記憶する記憶部２２、画像形成装置１側と通信しその認証を行うための近距離通信部（通信部）２３も同様に設けられる。
【００１８】
実際には画像形成装置１と無線通信で接続される携帯端末２は単一ではなく、複数が用いられる場合もある。この際、複数の携帯端末２の型式（機種）も様々であるが、それぞれが図２の構成要素を具備し、同様の動作をすることができる。この際、個々の携帯端末２が他の携帯端末２から認識されることを認可するか否かの設定を行う認証設定部２４も設けられる。この設定は、タッチパネルディスプレイ２１を介してユーザーにより行われ、制御部２０は、この設定に応じた動作を行う。また、画像形成装置１側のタッチパネルディスプレイ１１、携帯端末２側のタッチパネルディスプレイ２１は同等の機能をもち、これらの大きさは異なるが、同等の操作が可能とされる。
【００１９】
画像形成装置１側の制御部１０と携帯端末２側の制御部２０とは、近距離通信部１４、２３を介して互いに各種のデータのやりとりをすることができる。このデータとしては、画像形成装置１のタッチパネルディスプレイ１１、携帯端末２側のタッチパネルディスプレイ２１で表示される画像データ、これらのタッチパネルディスプレイに対して行われた操作の内容に対応する操作データがある。この画像データには、上記のようなアイコンが表示された画像であり、この操作データは、このうちのどのアイコンが操作されたか、あるいはアイコンに対してどのような操作が行われたかを示すデータである。また、例えば携帯端末２の記憶部２２に記憶された画像データ等を画像形成装置１側に送信し、画像形成装置１側でこの画像を印刷して出力させることもできる。
【００２０】
図３は、画像形成装置１において、３台の携帯端末２（２Ａ、２Ｂ、２Ｃ）が接続されたと制御部１０が認識した際にタッチパネルディスプレイ１１に表示させる画像の例である。ここでは、携帯端末２Ａ、２Ｂ、２Ｃに対応し各々のタッチパネルディスプレイ２１を含む外観を模写したアイコンＩ２Ａ、Ｉ２Ｂ、Ｉ２Ｃとして表示され、同時にこの画像形成装置１自身もアイコンＩＸとして表示される。図３では単純化して示されているが、アイコンＩ２Ａ、Ｉ２Ｂ、Ｉ２Ｃの外観は、機種に対応させた表示をさせてもよく、機種名を小さく表示させてもよい。
【００２１】
図４は、タッチパネルディスプレイ１１側で図３の表示が行われると同時に、携帯端末２Ａ側のタッチパネルディスプレイ２１側で表示される画像の一例である。ここでは、携帯端末２Ａ側から携帯端末２Ｂ、２Ｃ側を認識することができないものとしており、携帯端末２Ａ側から他の携帯端末を認識できる場合については後述する。ここでは、携帯端末２Ａで用いられるアプリケーションＡ１〜Ａ４に対応するアイコンＩＳＡ１〜ＩＳＡ４が表示されると共に、接続された画像形成装置１に対応するアイコンＩＳＸが表示されている。ユーザーがアイコンＩＳＡ１〜ＩＳＡ４のいずれかを操作した場合には、これに対応するアプリケーションが起動し、以降は、このアプリケーションの実行画面が表示される。アイコンＩＳＡ１〜ＩＳＡ４の表示については、この携帯端末２Ａが画像形成装置１と接続されていない場合と変わるところがなく、アイコンＩＳＸが表示されることによって、この携帯端末２Ａが画像形成装置１と接続された状態であることを、ユーザーが認識することができる。
【００２２】
このため、携帯端末２Ａ側の制御部２０がアイコンＩＳＡ１〜ＩＳＡ４（アプリケーションＡ１〜Ａ４）に関わる動作を行わせる際の制御については、従来より知られる携帯端末（スマートフォン）の動作と変わるところがない。一方、アイコンＩＳＸに関わる動作については、特許文献１等に記載の技術と同様である。すなわち、制御部２０がアイコンＩＳＸが操作されたと認識された場合には、制御部２０はその旨を画像形成装置１側の制御部１０に送信し、これを受信した制御部１０は、画像形成装置１の設定に用いられタッチパネルディスプレイ１１で表示される上記の画像データ（装置側画像データ）を制御部２０側に送信し、制御部２０はこの画像をタッチパネルディスプレイ２１に表示させる。その後、制御部２０はこの画面に対する操作内容、例えばこの画像中のどのアイコンが操作されたか、あるいはどのアイコンがどのように操作されたかを示す操作データ（端末側操作データ）を制御部１０側に送信し、制御部１０は、これに応じた画像形成装置１内の制御（設定）を行う、あるいは、この操作に応じた次の画像データ（装置側画像データ）を制御部２０側に送信して制御部２０が次の操作を受け付け、これに対応する操作データ（端末側操作データ）を制御部１０側に送信するという動作を、画像形成装置１側の設定が完了するまで繰り返す。
【００２３】
すなわち、上記のように装置側画像データと端末側操作データのやりとりを、行うことによって、携帯端末２Ａのタッチパネルディスプレイ２１を用いて、画像形成装置１の設定を携帯端末２Ａ側から行うことができる。携帯端末２Ｂ、２Ｃにおいても、同様である。
【００２４】
また、この画像形成装置１においては、図３の表示において、アイコンＩＸが操作された場合には、制御部１０は、タッチパネルディスプレイ１１の表示を画像形成装置１の初期画面に移行させる。この初期画面は、携帯端末２Ａ〜２Ｃが接続されない場合の画面と等しく、例えばこの画像形成装置１におけるデフォールト状態で設定された機能がコピー機能である場合には、コピー機能の設定画面である。以降は、携帯端末２Ａ〜２Ｃとの間の接続と無関係の動作が行われる。すなわち、ユーザーは、以降の操作においては、画像形成装置１のみを操作して、コピー機能、スキャナー機能等を用いることができる。
【００２５】
図３におけるアイコンＩ２Ａ、Ｉ２Ｂ、Ｉ２Ｃにおいては、それぞれにおけるタッチパネルディスプレイ２１に対応する仮想的なタッチパネルディスプレイである仮想表示部２１ＡＶ、２１ＢＶ、２１ＣＶがそれぞれ表示される。仮想表示部２１ＡＶには、図４におけるアイコンＩＳＡ１〜ＩＳＡ４が同様に表示されている。すなわち、タッチパネルディスプレイ１１においては、アイコンＩＳＸ以外が表示されないこと以外については、図４における携帯端末２Ａ側と同様の表示が行われる。アイコンＩ２Ｂ、Ｉ２Ｃにおいても、同様に仮想表示部２１ＢＶ、２１ＣＶで各々におけるアプリケーションに対応したアイコンＩＳＢ１〜ＩＳＢ４、ＩＳＣ１〜ＩＳＣ４が表示されている。
【００２６】
制御部１０がタッチパネルディスプレイ１１で図３の表示を行わせるに際し、制御部１０は、携帯端末２Ａ、２Ｂ、２Ｃの各々の制御部２０から、これらにおけるタッチパネルディスプレイ２１で表示される画像データ（端末側画像データ）を入手する。図３の表示が行われた後、制御部１０は、図３における仮想表示部２１ＡＶ内におけるユーザーの操作を認識し、この操作を、仮想表示部２１ＡＶ内のアイコンＩＳＡ１〜ＩＳＡ４に対しての操作と認識することができる。制御部１０は、この操作データ（装置側操作データ）を携帯端末２Ａ側の制御部２０に送信し、これを受信した制御部２０は、図４の表示で該当するアイコンが操作された場合と同様の動作を行わせることができる。例えばアイコンＩＳＡ１が操作された場合にはアプリケーションＡ１が起動するように設定する場合には、アプリケーションＡ１を起動させる。
【００２７】
制御部２０は、この際にアプリケーションＡ１の実行時にタッチパネルディスプレイ２１で表示させる画像をタッチパネル２１で表示させると同時に、この画像を新たな端末側画像データとして制御部１０側に送信する。図５に示されるように、これを受信した制御部１０は、この端末側画像データを仮想表示部２１ＡＶ中に表示する。ここでは、仮想表示部２１ＡＶではアプリケーションＡ１の実行画面が表示されている。その後、この画面に対してユーザから何らかの操作が行われた場合には、制御部１０は、この内容を装置側操作データとして制御部２０側に送信し、制御部２０は、携帯端末２Ａ側のタッチパネルディスプレイ２１で同様の操作が行われた場合と同様の制御をする。
【００２８】
このため、ユーザーは、画像形成装置１側のタッチパネルディスプレイ１１（仮想表示部２１ＡＶ）を、携帯端末２Ａ側のタッチパネルディスプレイ２１を用いる場合と同様に用いて、携帯端末２Ａにおけるアプリケーションを動作させることができる。この際、実際にこの動作が行われるのは携帯端末２Ａ中においてのみであり、その操作のためのみに画像形成装置１側のタッチパネルディスプレイ１１が用いられる。図２における携帯端末２Ａの他のアプリケーション(アイコン）、あるいは他の携帯端末２Ｂ、２Ｃが操作された場合においても、同様に、各携帯端末におけるタッチパネルディスプレイ２１が操作された場合と同様の動作が行われる。
【００２９】
例えば、携帯端末中に保存された画像データを加工した上で画像形成装置１で出力させる作業を行う際に、上記のような動作は極めて有効である。このように画像データの加工を行うためのアプリケーションが携帯端末側にインストールされていれば、ユーザーは、この加工作業を画像形成装置１側の操作のみで行うことができ、その後、加工後の画像を画像形成装置１で出力させることができる。この際、携帯端末が画像形成装置１と通信可能な距離にある限り、携帯端末側には一切の操作を行う必要はない。このため、この作業を特に効率的に行うことができる。一方、作業に必要となるアプリケーションは、携帯端末側においてのみインストールされていればよい。また、この画像形成装置１と携帯端末２Ａ、２Ｂ、２Ｃで構成される画像形成システム全体の制御を、画像形成装置１（タッチパネルディスプレイ１１、操作部１２）に対する操作のみで行うことができる。
【００３０】
上記の例においては、図４に示されたように、携帯端末２Ａ側の表示においては、画像形成装置１に対応するアイコンＩＳＸが表示されたのに対し、他の携帯端末２Ｂ、２Ｃに関わる表示は行われないため、携帯端末２Ａのユーザーは、他の携帯端末２Ｂ、２Ｃの接続の有無を認識することができない。このような他の携帯端末の認識の許可、不許可は、図２における認証設定部２４を用いて各携帯端末側から設定することができる。この設定は、各携帯端末の制御部２０がタッチパネルディスプレイ２１を介してユーザーに問い合わせて行わせることができる。例えば、携帯端末２Ａ、２Ｂ、２Ｃの全てにおいて、自身が他の携帯端末から認識されることを許可する設定がなされた場合における携帯端末２Ａ、２Ｂ、２Ｃの各々におけるタッチパネルディスプレイ２１での表示の例を図６（ａ）〜（ｃ）に示す。ここでは、各携帯端末において、他の２つの携帯端末（図６（ａ）においてはアイコンＩＳＳ２Ｂ、ＩＳＳ２Ｃ、図６（ｃ）においてはアイコンＩＳＳ２Ａ、ＩＳＳ２Ｃ、図６（ｃ）においてはＩＳＳ２Ａ、ＩＳＳ２Ｂ）が表示されている。また、携帯端末２Ａ（図６（ａ））においてはアプリケーションＡ１〜Ａ４に対応したアイコンＩＳＡ１〜ＩＳＡ２が、携帯端末２Ｂ（図６（ｂ））においてはアプリケーションＢ１〜Ｂ４に対応したアイコンＩＳＢ１〜ＩＳＢ２が、携帯端末２Ｃ（図６（ｃ））においてはアプリケーションＣ１〜Ｃ４に対応したアイコンＩＳＣ１〜ＩＳＣ２が、それぞれ表示されている。
【００３１】
一方、携帯端末２Ｂにおいてのみ自身が他の携帯端末から認識されることを不許可とされた場合における同様の表示を図７（ａ）〜（ｃ）に示す。この場合には、図７（ａ）（ｃ）において、アイコンＩＳＳ２Ｂが表示されない。
【００３２】
このように自身が他の携帯端末から認識できるような設定とした場合には、画像形成装置１における制御部１０が行ったような、入出力のためにおいてのみ自身のタッチパネルディスプレイで行わせ、アプリケーションの実行は他の携帯端末で行わせるという動作を、携帯端末側でも行わせることができる。すなわち、前記の制御部１０と同様の動作を、携帯端末２（２Ａ、２Ｂ、２Ｃ）の制御部２０で行わせることにより、例えば携帯端末２Ａで仮想的に携帯端末Ｂを動作させることができる。この際、携帯端末２Ａのタッチパネルディスプレイ２１に対して行われた操作の内容（端末側操作データ）や、これに対応して携帯端末２Ａで仮想的に表示させる画像（端末側画像データ）を携帯端末２Ａ、２Ｂ間でやりとりすることが必要となるが、これは、画像形成装置１を介して行うことができる。すなわち、制御部１０は、この動作も行う。
【００３３】
図８は、この場合において、図６（ａ）の表示が行われた携帯端末２ＡにおいてアイコンＩＳＳ２Ｂが操作された直後の表示を示す。ここでは、アイコンＩＳＳ２Ｂが拡大表示され、その中に設けられたアイコンＩＳＢ１〜ＩＳＢ４（アプリケーションＢ１〜Ｂ４に対応）をタッチパネルディスプレイ２１中のアイコンＩＳＳ２Ｂ中の仮想表示部２１ＢＶＳに表示させることができる。仮想表示部２１ＢＶＳに表示させるべき画像（端末側画像データ）は、携帯端末２Ａにおける制御部２０が、携帯端末２１Ｂにおける制御部２０から、画像形成装置１における制御部１０を介して入手することができる。
【００３４】
その後、携帯端末２Ａにおける制御部２０は、仮想表示部２１ＢＶＳで行われた操作の内容（端末側操作データ）を、画像形成装置１における制御部１０を介して携帯端末２Ｂにおける制御部２０に送信することができる。その後は、携帯端末２Ｂにおける制御部２０は、その後で仮想表示部２１ＢＶＳで表示させるべき画像を制御部１０を介して携帯端末２Ａにおける制御部２０に送信する。この画像は、携帯端末２Ｂ側で同様の操作が行われた場合においてそのタッチパネルディスプレイ２１で表示させる画像と等しい。この動作に関わるアプリケーションの動作が終了するまで繰り返される。
【００３５】
すなわち、この画像形成装置１と携帯端末２Ａ、２Ｂ、２Ｃで構成される画像形成システムにおいては、携帯端末２Ａ、２Ｂ、２Ｃの各々にインストールされたアプリケーションを、画像形成装置１、携帯端末２Ａ、２Ｂ、２Ｃの各機器において、自身以外の機器に設けられたタッチパネルディスプレイを用いて実行させることができる。
【００３６】
上記の動作を行わせるにあたり、制御部１０、２０は、その利便性を高めるために、各種の動作を行うことができる。例えば、図３の状態において、携帯端末２ＡにおけるアプリケーションＡ１、携帯端末２ＢにおけるアプリケーションＢ２、携帯端末２ＣにおけるアプリケーションＣ４が実際には同一のアプリケーションである場合がある。この場合には、これらのアプリケーションをどの機器から動作させても、同様の結果が得られる場合がある。この場合、図９に示されるように、これらに対応したアイコンＩＳＡ１、ＩＳＢ２、ＩＳＣ４を、同一の色で強調表示させることにより、ユーザーは、この旨を認識することができる。制御部１０は、こうした判定を行い、こうした表示を行わせることができる。この表示は、携帯端末２Ａ、２Ｂ、２Ｃ側（図４）においても、同様に行わせることができる。
【００３７】
また、上記の場合には、重複したアプリケーションに対応したアイコンは表示させる必要がない。このため、画像形成装置１側で上記の表示を行う際には、図１０に示されるように、仮想表示部２１ＢＶにおけるアイコンＩＳＢ２、仮想表示部２１ＣＶにおけるアイコンＩＳＣ４を消去してもよい。同様に、携帯端末２ＢでアイコンＩＳＢ２、携帯端末２ＣでアイコンＩＳＣ４を消去してもよい。この場合には、実際にはアプリケーションＢ２、Ｃ４はそれぞれの携帯端末でアンインストールされてはいないが、表示の上では消去される。この場合には、図８においてアイコンＩＳＸが表示されていることにより、便宜上こうした表示となったことを、ユーザーは認識することができる。
【００３８】
また、上記のような動作が可能となった場合には、ユーザーの都合により、携帯端末２ＢにおけるアプリケーションＢ３を携帯端末２Ａ側から動作させたい場合がある。こうした場合においては、画像形成装置１側の操作によって、これが容易となるような設定とすることができる。図１１（ａ）は、この場合における画像形成装置１（タッチパネルディスプレイ１１）側の操作を、図１１（ｂ）は、その後における携帯端末２Ａ、２Ｂ（タッチパネルディスプレイ２１）の表示を示す。図１１（ａ）においては、ユーザーが携帯端末２Ｂに対応した仮想表示部２１ＢＶにおけるアイコンＩＳＢ３をドラッグして携帯端末２Ａに対応した仮想表示部２１ＡＶに移動させている。これによって、図１１（ｂ）に示されるように、携帯端末２Ａにおけるタッチパネルディスプレイ２１には、アイコンＩＳＢ３が追加されて表示される。その後のアイコンＩＳＢ３に対する操作によって、上記と同様に、アプリケーションＢ３を携帯端末２Ｂ上で実行させることができる。この際、携帯端末２Ａのタッチパネルディスプレイ２１においては、上記の場合と同様に、アイコンＩＳＢ３は特殊なアイコンであることをユーザーに認識させるために、強調表示することが好ましい。携帯端末２Ｂのタッチパネルディスプレイ２１においては、アイコンＩＳＢ３はそのまま残してもよく、これを薄色表示してもよい。
【００３９】
上記の動作においては、制御部１０が図１１（ａ）の操作内容を認識して図１１（ｂ）のように仮想表示部２１ＢＶ、２１ＡＶ内の表示を変える。その後、この仮想表示部２１ＡＶ中でアイコンＩＳＢ３が操作された場合には、制御部１０は、この操作内容（装置側操作データ）を携帯端末２１Ｂに送信することによって、アプリケーションＢ３を実行させることができる。
【００４０】
また、図１１（ｂ）と同様の表示を携帯端末２Ａ、２Ｂ側でも行わせることができ、同様にアプリケーションＢ３を携帯端末２Ａを操作することによって実行させることができる。この場合には、制御部１０は、携帯端末２Ｂ（第１の携帯端末）からアイコンＩＳＢ３が含まれる端末側画像データを入手して、これを携帯端末２Ａ（第２の携帯端末）に送信する。これによって、図１１（ｂ）のようにアイコンＩＳＢ３が含まれる表示を携帯端末２Ａのタッチパネルディスプレイ２１で行わせることができる。その後、携帯端末２Ａは、アイコンＩＳＢ３が操作された際には、その内容の端末側操作データを制御部１０に送信し、制御部１０は、これを携帯端末２Ｂ（第１の携帯端末）に送信し、携帯端末２Ｂ（制御部２０）はアプリケーションＢ３を実行させる。
【００４１】
このように、ある一つの携帯端末と他の携帯端末との間で、端末側画像データ、端末側操作データを、画像形成装置１における制御部１０を介して互いにやりとりすることによって、他の携帯端末にインストールされたアプリケーションを、仮想的に自身にあるものとした操作を行ない実行させることができる。
【００４２】
上記のいずれの動作においても、画像形成装置、携帯端末は、自身にインストールされていないアプリケーションを、自身の操作のみで実行させることができる。この際、各々に設けられた制御部が、上記のように画像データ、操作データをやりとりするだけで、上記の動作を行わせることができ、このようなデータのやりとりは、画像形成装置の制御部を用いて特に効率的に行うことができる。一方で、携帯端末自身における動作は、画像形成装置との接続の有無に関わらず行わせることができる。
【００４３】
上記の例において、例えば画像形成装置における図１において記載された以外の構成、携帯端末における図２において記載された以外の構成は、任意である。すなわち、様々な機能を持つ画像形成装置、携帯端末に対して上記の構成を適用することができる。あるいは、この画像形成装置と携帯端末とを組み合わせて高機能の画像形成システムを構成することができる。
【符号の説明】
【００４４】
１  画像形成装置
２、２Ａ、２Ｂ、２Ｃ  携帯端末
１０  制御部（装置側制御部）
１１  タッチパネルディスプレイ（装置側タッチパネルディスプレイ）
１２  操作部
１３、２２  記憶部
１４、２３  近距離通信部（通信部）
１５  認証処理部
２０  制御部（端末側制御部）
２１  タッチパネルディスプレイ（端末側タッチパネルディスプレイ）
２１ＡＶ、２１ＢＶ、２１ＣＶ、２１ＢＶＳ  仮想表示部
２４  認証設定部
Ｉ２Ａ、Ｉ２Ｂ、Ｉ２Ｃ、ＩＸ、ＩＳＡ１〜ＩＳＡ４、ＩＳＢ１〜ＩＳＢ４、ＩＳＣ１〜ＩＳＣ４、ＩＳＸ、ＩＸ  アイコン
【図１】
2019155798.tif 000003
【図２】
2019155798.tif 000004
【図３】
2019155798.tif 000005
【図４】
2019155798.tif 000006
【図５】
2019155798.tif 000007
【図６】
2019155798.tif 000008
【図７】
2019155798.tif 000009
【図８】
2019155798.tif 000010
【図９】
2019155798.tif 000011
【図１０】
2019155798.tif 000012
【図１１】
2019155798.tif 000013