(57)【特許請求の範囲】
【請求項１】
画像処理装置と、前記画像処理装置を遠隔操作可能な遠隔操作装置とを含む遠隔制御システムであって、
前記遠隔操作装置は、
ユーザーによる操作を受け付ける遠隔側操作受付手段と、
前記操作受付手段により操作が受け付けられることに応じて、前記画像処理装置に遠隔操作指令を送信する遠隔操作手段と、を備え、
前記画像処理装置は、
ユーザーによる操作を受け付ける装置側操作受付手段と、
前記装置側操作受付手段により受け付けられた操作に対応する処理を実行する処理実行手段と、
前記遠隔操作装置と通信経路を確立した連携モードにおいて、前記遠隔操作装置から受信される前記遠隔操作指令に従って前記処理実行手段に処理を実行させる遠隔制御手段と、を備え、
前記遠隔操作装置および前記画像処理装置のいずれか一方の第１装置は、
ユーザーによる操作が受け付けられることに応じて、第１の媒体を用いてユーザーに通知する第１通知手段をさらに備え、
前記遠隔操作装置および前記画像処理装置のうち前記第１装置とは別の第２装置は、
前記第１装置と通信経路を確立した連携モードでない場合は、ユーザーによる操作が受け付けられることに応じて第２の媒体を用いてユーザーに通知する第２通知手段をさらに備え、
前記第２通知手段は、前記連携モードの場合は、前記第２の媒体が前記第１の媒体と異なる場合であって前記第１の媒体を用いてユーザーに通知可能な場合は、ユーザーによる操作が受け付けられることに応じて、前記第２の媒体を用いることなく、前記第１の媒体を用いてユーザーに通知する、遠隔制御システム。
【請求項２】
前記第１通知手段は、通知の程度が異なる複数のレベルのうちから選択されたレベルで通知し、
前記第２通知手段は、前記連携モードの場合は、前記第１通知手段が選択可能な複数のレベルと同じ数のレベルに前記第１の媒体を用いた通知の程度を分割し、前記分割された複数のレベルのうち前記第１通知手段が通知するレベルに対応するレベルを決定し、ユーザーによる操作が受け付けられることに応じて前記決定されたレベルで前記第１の媒体を用いてユーザーに通知する、請求項１に記載の遠隔制御システム。
【請求項３】
前記第２通知手段は、前記連携モードの場合は、前記第２の媒体が前記第１の媒体と異なる場合であって前記第１の媒体を用いてユーザーに通知不可能な場合は、前記第１通知手段が選択可能な複数のレベルと同じ数のレベルに前記第２の媒体を用いた通知の程度を分割し、前記分割された複数のレベルのうち前記第１通知手段が通知するレベルに対応するレベルを決定し、ユーザーによる操作が受け付けられることに応じて前記決定されたレベルで前記第２の媒体を用いてユーザーに通知する、請求項２に記載の遠隔制御システム。
【請求項４】
前記第１の媒体および前記第２の媒体は、音、画像および振動のいずれかである、請求項１〜３のいずれかに記載の遠隔制御システム。
【請求項５】
前記遠隔操作装置は、
音を出力する音発生手段と、
表示手段に表示された画像に所定の画像を重畳表示する重畳制御手段と、
振動を発生する振動手段と、の少なくとも１つをさらに備え、
前記画像処理装置は、
音を出力する装置側音発生手段と、
装置側表示手段に表示された画像に所定の画像を重畳表示する装置側重畳制御手段と、
振動を発生する装置側振動手段と、の少なくとも１つをさらに備えた、請求項１〜４のいずれかに記載の遠隔制御システム。
【請求項６】
前記遠隔操作装置は、
画像を表示する表示手段と、前記表示手段の表示面中でユーザーにより指示された位置を検出する位置検出手段と、を、さらに備え、
前記遠隔側操作受付手段は、前記位置検出手段により位置が検出されることに応じて、前記画像中の位置を指示する操作を検出し、
前記遠隔操作手段は、前記画像処理装置から受信された画像を前記表示手段に表示し、前記遠隔側操作受付手段により検出された操作で特定される前記画像中の位置を示す位置情報を含む遠隔操作指令を前記画像処理装置に送信し、
前記画像処理装置は、
画像を表示する装置側表示手段と、
前記装置側表示手段の表示面中でユーザーにより指示された位置を検出する装置側位置検出手段と、をさらに備え、
前記装置側操作受付手段は、前記装置側表示手段に操作画面の画像が表示された状態で前記装置側位置検出手段により位置が検出されることに応じて、前記検出された位置に対応する前記操作画面中の位置に関連付けられた操作を決定し、
前記遠隔制御手段は、操作画面の画像を前記遠隔操作装置に送信した後に前記遠隔操作装置から受信される前記遠隔操作指令に含まれる位置情報で特定される位置に対応する前記送信された操作画面の画像中の位置に関連付けられた操作に対応する処理を前記処理実行手段に実行させる、請求項１〜５のいずれかに記載の遠隔制御システム。
【請求項７】
前記画像処理装置は、
連携モードにおいて、前記遠隔操作装置および自装置のいずれかに操作権限を切り換える操作権限切換手段を、さらに備え、
前記装置側操作受付手段は、前記連携モードにおいて、自装置に操作権限が切り換えられている場合に操作を受け付ける、請求項１〜６のいずれかに記載の遠隔制御システム。
【請求項８】
遠隔操作装置によって遠隔操作されることが可能な画像処理装置であって、
ユーザーによる操作を受け付ける装置側操作受付手段と、
前記装置側操作受付手段により受け付けられた操作に対応する処理を実行する処理実行手段と、
前記遠隔操作装置と通信経路を確立した連携モードに設定する連携モード設定手段と、
前記連携モードにおいて、前記遠隔操作装置から受信される遠隔操作指令に従って前記処理実行手段に処理を実行させる遠隔制御手段と、
前記遠隔操作装置が操作を受け付けることに応じてユーザーに通知する第１の媒体の種類を取得する通知種類取得手段と、
前記連携モードに設定されていない場合は、前記装置側操作受付手段により操作が受け付けられることに応じて第２の媒体を用いてユーザーに通知する装置側通知手段と、を備え、
前記装置側通知手段は、前記連携モードに設定されている場合は、前記第２の媒体が前記第１の媒体と異なる場合であって前記第１の媒体を用いてユーザーに通知可能な場合は、前記装置側操作受付手段により操作が受け付けられることに応じて、前記第２の媒体を用いることなく、前記第１の媒体を用いてユーザーに通知する、画像処理装置。
【請求項９】
前記遠隔操作装置が前記第１の媒体を用いて通知可能な程度の範囲と、前記遠隔操作装置が前記第１の媒体を用いて通知するために設定されている前記程度の範囲中のレベルとを取得するレベル取得手段を、さらに備え、
前記装置側通知手段は、前記連携モードの場合は、前記遠隔操作装置が選択可能な複数のレベルと同じ数のレベルに前記第１の媒体を用いた通知の程度を分割し、前記分割された複数のレベルのうち前記第１通知手段が通知するレベルに対応するレベルを決定し、ユーザーによる操作が受け付けられることに応じて前記決定されたレベルで前記第１の媒体を用いてユーザーに通知する、請求項８に記載の画像処理装置。
【請求項１０】
前記装置側通知手段は、前記連携モードの場合は、前記第２の媒体が前記第１の媒体と異なる場合であって前記第１の媒体を用いてユーザーに通知不可能な場合は、前記第１通知手段が選択可能な複数のレベルと同じ数のレベルに前記第２の媒体を用いた通知の程度を分割し、前記分割された複数のレベルのうち前記第１通知手段が通知するレベルに対応するレベルを決定し、ユーザーによる操作が受け付けられることに応じて前記決定されたレベルで前記第２の媒体を用いてユーザーに通知する、請求項９に記載の画像処理装置。
【請求項１１】
遠隔操作装置によって遠隔操作されることが可能な画像処理装置で実行される遠隔制御方法であって、
ユーザーによる操作を受け付ける装置側操作受付ステップと、
前記装置側操作受付ステップにおいて受け付けられた操作に対応する処理を実行する処理実行ステップと、
前記遠隔操作装置と通信経路を確立した連携モードに設定する連携モード設定ステップと、
前記連携モードにおいて、前記遠隔操作装置から受信される遠隔操作指令に従って処理を実行する遠隔制御ステップと、
前記遠隔操作装置が操作を受け付けることに応じてユーザーに通知する第１の媒体の種類を取得する通知種類取得ステップと、
前記連携モードに設定されていない場合は、前記装置側操作受付ステップにおいて操作が受け付けられることに応じて第２の媒体を用いてユーザーに通知する装置側通知ステップと、を含み、
前記装置側通知ステップは、前記連携モードに設定されている場合は、前記第２の媒体が前記第１の媒体と異なる場合であって前記第１の媒体を用いてユーザーに通知可能な場合は、前記装置側操作受付ステップにおいて操作が受け付けられることに応じて、前記第２の媒体を用いることなく、前記第１の媒体を用いてユーザーに通知するステップを含む、遠隔制御方法。
【請求項１２】
遠隔操作装置によって遠隔操作されることが可能な画像処理装置を制御するコンピューターで実行される遠隔制御プログラムであって、
ユーザーによる操作を受け付ける装置側操作受付ステップと、
前記装置側操作受付ステップにおいて受け付けられた操作に対応する処理を実行する処理実行ステップと、
前記遠隔操作装置と通信経路を確立した連携モードに設定する連携モード設定ステップと、
前記連携モードにおいて、前記遠隔操作装置から受信される遠隔操作指令に従って処理を実行する遠隔制御ステップと、
前記遠隔操作装置が操作を受け付けることに応じてユーザーに通知する第１の媒体の種類を取得する通知種類取得ステップと、
前記連携モードに設定されていない場合は、前記装置側操作受付ステップにおいて操作が受け付けられることに応じて第２の媒体を用いてユーザーに通知する装置側通知ステップと、を前記コンピューターに実行させ、
前記装置側通知ステップは、前記連携モードに設定されている場合は、前記第２の媒体が前記第１の媒体と異なる場合であって前記第１の媒体を用いてユーザーに通知可能な場合は、前記装置側操作受付ステップにおいて操作が受け付けられることに応じて、前記第２の媒体を用いることなく、前記第１の媒体を用いてユーザーに通知するステップを含む、遠隔制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、遠隔制御システム、画像処理装置、遠隔制御方法、および遠隔制御プログラムに関し、特に、画像処理装置を遠隔操作可能な遠隔制御システム、その画像処理装置、その画像処理装置で実行される遠隔制御方法および遠隔操作プログラムに関する。
【背景技術】
【０００２】
近年、スマートフォン、タブレット端末等の携帯情報装置で複合機（以下「ＭＦＰ」という）を遠隔操作する技術が知られている。携帯情報装置からＭＦＰに接続し、携帯情報装置でＭＦＰを遠隔操作することが可能である。この遠隔操作を実現する技術として、ＭＦＰで表示している操作画面そのものを携帯情報装置で表示し、携帯情報装置では操作画面中でユーザーにより指示された位置を示す位置情報をＭＦＰに返信することにより、携帯情報装置からＭＦＰを遠隔制御する技術が知られている。
【０００３】
例えば、特開平０５−１２２４２４号公報には、表示部と入力部を有する事務機器，表示部と入力部を有する遠隔制御ユニット，及び少なくとも１台の前記事務機器と前記遠隔制御ユニットとを接続する情報伝送路、を備える事務機器の遠隔制御装置において、前記事務機器に、該事務機器の状態及び入力手段の位置を示す表示情報を二次元画像情報として保持する第１のイメ−ジ記憶手段，該第１のイメ−ジ記憶手段が記憶する二次元画像情報を表示する第１のビットマップ表示手段，及び該ビットマップ表示手段の表示上の所定位置を指示する入力及び前記情報伝送路から入力される遠隔制御コマンドに応答して事務機器の動作モ−ドを変更するとともに、所定の指示に応答して前記第１のイメ−ジ記憶手段に保持された二次元画像情報を前記情報伝送路に出力する第１の制御手段を備え、前記遠隔制御ユニットに、前記情報伝送路に現われる二次元画像情報を入力して記憶する第２のイメ−ジ記憶手段，該第２のイメ−ジ記憶手段が記憶する二次元画像情報を表示する第２のビットマップ表示手段，及び該第２のビットマップ表示手段の表示上の位置を指示する入力に応答して、所定の遠隔制御コマンドを前記情報伝送路に出力する第２の制御手段を備えたことを特徴とする事務機器の遠隔制御装置が記載されている。
【０００４】
特開平０５−１２２４２４号公報に記載の携帯情報装置に相当する遠隔制御ユニットからＭＦＰに相当する事務機器を遠隔制御する技術を用いる場合、携帯情報装置に対する操作がＭＦＰに対する操作と同じになるので、ＭＦＰを直接操作する場合と同じ操作で、携帯情報装置を用いて事務機器を遠隔操作することができる。しかしながら、携帯情報装置が有するユーザーインターフェースと、ＭＦＰが有するユーザーインターフェースとに差がある場合、携帯情報装置とＭＦＰのいずれか一方で実現できるが、他方で実現できない機能が発生する場合がある。例えば、携帯情報装置は振動を発生する振動装置を有し、操作を受け付けることに応じて振動装置を駆動して振動により操作を受け付けたことをユーザーに通知するユーザーインターフェースを有するが、ＭＦＰが振動装置を有しない場合、ＭＦＰは操作を受け付けたことを振動でユーザーに通知することができない。また、携帯情報装置が有するユーザーインターフェースと、ＭＦＰが有するユーザーインターフェースとは同じであるが、機能を実現する程度が携帯情報装置とＭＦＰとで異なる場合がある。例えば、携帯情報装置とＭＦＰとが音を発生するスピーカを有し、操作を受け付けることに応じてスピーカから発生する音により操作を受け付けたことをユーザーに通知するユーザーインターフェースを有する場合、携帯情報装置とＭＦＰそれぞれで発生する音の大きさが異なる場合がある。このため、携帯情報装置を用いてＭＦＰを遠隔操作する場合とＭＦＰを操作する場合とで、操作に対する応答が異なるので、同一の操作への応答の違いがユーザーに違和感を与えるといった問題がある。
【特許文献１】特開平０５−１２２４２４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
この発明は上述した問題点を解決するためになされたもので、この発明の目的の一つは、遠隔操作装置による画像処理装置の遠隔操作に対する応答と、画像処理装置の操作に対する応答とを同じにすることが可能な遠隔制御システムを提供することである。
この発明の他の目的は、ユーザーによる操作に対する応答を、遠隔操作装置による画像処理装置の遠隔操作に対する応答と同じにすることが可能な画像形成装置を提供することである。
この発明のさらに他の目的は、ユーザーによる操作に対する応答を、遠隔操作装置による画像処理装置の遠隔操作に対する応答と同じにすることが可能な遠隔制御方法を提供することである。
この発明のさらに他の目的は、ユーザーによる操作に対する応答を、遠隔操作装置による画像処理装置の遠隔操作に対する応答と同じにすることが可能な遠隔制御プログラムを提供することである。
【課題を解決するための手段】
【０００６】
上述した目的を達成するためにこの発明のある局面によれば、遠隔制御システムは、画像処理装置と、画像処理装置を遠隔操作可能な遠隔操作装置とを含む遠隔制御システムであって、遠隔操作装置は、ユーザーによる操作を受け付ける遠隔側操作受付手段と、操作受付手段により操作が受け付けられることに応じて、画像処理装置に遠隔操作指令を送信する遠隔操作手段と、を備え、画像処理装置は、ユーザーによる操作を受け付ける装置側操作受付手段と、装置側操作受付手段により受け付けられた操作に対応する処理を実行する処理実行手段と、遠隔操作装置と通信経路を確立した連携モードにおいて、遠隔操作装置から受信される遠隔操作指令に従って処理実行手段に処理を実行させる遠隔制御手段と、を備え、遠隔操作装置および画像処理装置のいずれか一方の第１装置は、ユーザーによる操作が受け付けられることに応じて、第１の媒体を用いてユーザーに通知する第１通知手段をさらに備え、遠隔操作装置および画像処理装置のうち第１装置とは別の第２装置は、第１装置と通信経路を確立した連携モードでない場合は、ユーザーによる操作が受け付けられることに応じて第２の媒体を用いてユーザーに通知する第２通知手段をさらに備え、第２通知手段は、連携モードの場合は、第２の媒体が第１の媒体と異なる場合であって第１の媒体を用いてユーザーに通知可能な場合は、ユーザーによる操作が受け付けられることに応じて、第２の媒体を用いることなく、第１の媒体を用いてユーザーに通知する。
【０００７】
この局面に従えば、遠隔操作装置および画像処理装置のいずれか一方の第１装置は、ユーザーによる操作が受け付けられることに応じて、第１の媒体を用いてユーザーに通知し、遠隔操作装置および画像処理装置のうち第２装置は、第１装置と通信経路を確立した連携モードでない場合は、ユーザーによる操作が受け付けられることに応じて第２の媒体を用いてユーザーに通知し、連携モードの場合は、第２の媒体が第１の媒体と異なる場合であって第１の媒体を用いてユーザーに通知可能な場合は、ユーザーによる操作が受け付けられることに応じて第１の媒体を用いてユーザーに通知する。このため、遠隔操作装置を操作する場合と、画像処理装置を操作する場合とで同じ第１の媒体を用いて通知される。その結果、遠隔操作装置による画像処理装置の遠隔操作に対する応答と、画像処理装置の操作に対する応答とを同じにすることが可能な遠隔制御システムを提供することができる。
【０００８】
好ましくは、第１通知手段は、通知の程度が異なる複数のレベルのうちから選択されたレベルで通知し、第２通知手段は、連携モードの場合は、第１通知手段が選択可能な複数のレベルと同じ数のレベルに第１の媒体を用いた通知の程度を分割し、分割された複数のレベルのうち第１通知手段が通知するレベルに対応するレベルを決定し、ユーザーによる操作が受け付けられることに応じて決定されたレベルで第１の媒体を用いてユーザーに通知する。
【０００９】
この局面に従えば、第２装置は、連携モードの場合は、第１装置が選択可能な複数のレベルと同じ数のレベルに第１の媒体を用いた通知の程度を分割し、分割された複数のレベルのうち第１装置が通知するレベルに対応するレベルを決定し、ユーザーによる操作が受け付けられることに応じて決定されたレベルで第１の媒体を用いてユーザーに通知する。このため、遠隔操作装置を操作する場合と、画像処理装置を操作する場合とで第１の媒体を用いて通知する程度を同じにすることができる。
【００１０】
好ましくは、第２通知手段は、連携モードの場合は、第２の媒体が第１の媒体と異なる場合であって第１の媒体を用いてユーザーに通知不可能な場合は、第１通知手段が選択可能な複数のレベルと同じ数のレベルに第２の媒体を用いた通知の程度を分割し、分割された複数のレベルのうち第１通知手段が通知するレベルに対応するレベルを決定し、ユーザーによる操作が受け付けられることに応じて決定されたレベルで第２の媒体を用いてユーザーに通知する。
【００１１】
この局面に従えば、第２装置は、連携モードでない場合は、ユーザーによる操作が受け付けられることに応じて第２の媒体を用いてユーザーに通知し、連携モードの場合は、第２の媒体が第１の媒体と異なる場合であって第１の媒体を用いてユーザーに通知可能な場合は、第１装置が選択可能な複数のレベルと同じ数のレベルに第２の媒体を用いた通知の程度を分割し、分割された複数のレベルのうち第１装置が通知するレベルに対応するレベルを決定し、ユーザーによる操作が受け付けられることに応じて決定されたレベルで第２の媒体を用いてユーザーに通知する。このため、遠隔操作装置を操作する場合と、画像処理装置を操作する場合とで通知する媒体は異なるが同じ程度で通知することができる。
【００１２】
好ましくは、第１の媒体および第２の媒体は、音、画像および振動のいずれかである。
【００１３】
この局面に従えば、音、画像および振動のいずれかで、操作を受け付けたことをユーザーに通知することができる。
【００１４】
好ましくは、遠隔操作装置は、音を出力する音発生手段と、表示手段に表示された画像に所定の画像を重畳表示する重畳制御手段と、振動を発生する振動手段と、の少なくとも１つをさらに備え、画像処理装置は、音を出力する装置側音発生手段と、装置側表示手段に表示された画像に所定の画像を重畳表示する装置側重畳制御手段と、振動を発生する装置側振動手段と、の少なくとも１つをさらに備える。
【００１５】
この局面に従えば、音、画像および振動のいずれかで、操作を受け付けたことをユーザーに通知することができる。
【００１６】
好ましくは、遠隔操作装置は、画像を表示する表示手段と、表示手段の表示面中でユーザーにより指示された位置を検出する位置検出手段と、を、さらに備え、遠隔側操作受付手段は、位置検出手段により位置が検出されることに応じて、画像中の位置を指示する操作を検出し、遠隔操作手段は、画像処理装置から受信された画像を表示手段に表示し、遠隔側操作受付手段により検出された操作で特定される画像中の位置を示す位置情報を含む遠隔操作指令を画像処理装置に送信し、画像処理装置は、画像を表示する装置側表示手段と、装置側表示手段の表示面中でユーザーにより指示された位置を検出する装置側位置検出手段と、をさらに備え、装置側操作受付手段は、装置側表示手段に操作画面の画像が表示された状態で装置側位置検出手段により位置が検出されることに応じて、検出された位置に対応する操作画面中の位置に関連付けられた操作を決定し、遠隔制御手段は、操作画面の画像を遠隔操作装置に送信した後に遠隔操作装置から受信される遠隔操作指令に含まれる位置情報で特定される位置に対応する送信された操作画面の画像中の位置に関連付けられた操作に対応する処理を処理実行手段に実行させる。
【００１７】
この局面に従えば、遠隔操作装置の操作と、画像処理装置の操作とを、表示面を指示する操作として同じにすることができる。
【００１８】
好ましくは、画像処理装置は、連携モードにおいて、遠隔操作装置および自装置のいずれかに操作権限を切り換える操作権限切換手段を、さらに備え、装置側操作受付手段は、連携モードにおいて、自装置に操作権限が切り換えられている場合に操作を受け付ける。
【００１９】
この局面に従えば、遠隔操作装置に対する操作と、画像処理装置に対する操作を切り換えるので、操作を容易にすることができる。
【００２０】
この発明の他の局面によれば、画像処理装置は、遠隔操作装置によって遠隔操作されることが可能な画像処理装置であって、ユーザーによる操作を受け付ける装置側操作受付手段と、装置側操作受付手段により受け付けられた操作に対応する処理を実行する処理実行手段と、遠隔操作装置と通信経路を確立した連携モードに設定する連携モード設定手段と、連携モードにおいて、遠隔操作装置から受信される遠隔操作指令に従って処理実行手段に処理を実行させる遠隔制御手段と、遠隔操作装置が操作を受け付けることに応じてユーザーに通知する第１の媒体の種類を取得する通知種類取得手段と、連携モードに設定されていない場合は、装置側操作受付手段により操作が受け付けられることに応じて第２の媒体を用いてユーザーに通知する装置側通知手段と、を備え、装置側通知手段は、連携モードに設定されている場合は、第２の媒体が第１の媒体と異なる場合であって第１の媒体を用いてユーザーに通知可能な場合は、装置側操作受付手段により操作が受け付けられることに応じて、第２の媒体を用いることなく、第１の媒体を用いてユーザーに通知する。
【００２１】
この局面に従えば、ユーザーによる操作に対する応答を、遠隔操作装置による画像処理装置の遠隔操作に対する応答と同じにすることが可能な画像形成装置を提供することができる。
【００２２】
好ましくは、遠隔操作装置が第１の媒体を用いて通知可能な程度の範囲と、遠隔操作装置が第１の媒体を用いて通知するために設定されている程度の範囲中のレベルとを取得するレベル取得手段を、さらに備え、装置側通知手段は、連携モードの場合は、遠隔操作装置が選択可能な複数のレベルと同じ数のレベルに第１の媒体を用いた通知の程度を分割し、分割された複数のレベルのうち第１通知手段が通知するレベルに対応するレベルを決定し、ユーザーによる操作が受け付けられることに応じて決定されたレベルで第１の媒体を用いてユーザーに通知する。
【００２３】
この局面に従えば、ユーザーによる操作に対する応答の程度を、遠隔操作装置による画像処理装置の遠隔操作に対する応答の程度と同じにすることができる。
【００２４】
好ましくは、装置側通知手段は、連携モードの場合は、第２の媒体が第１の媒体と異なる場合であって第１の媒体を用いてユーザーに通知不可能な場合は、第１通知手段が選択可能な複数のレベルと同じ数のレベルに第２の媒体を用いた通知の程度を分割し、分割された複数のレベルのうち第１通知手段が通知するレベルに対応するレベルを決定し、ユーザーによる操作が受け付けられることに応じて決定されたレベルで第２の媒体を用いてユーザーに通知する。
【００２５】
この局面に従えば、ユーザーによる操作に対する応答を、遠隔操作装置に対する操作の場合に比較して媒体は異なるが同じ程度で通知することができる。
【００２６】
この発明のさらに他の局面によれば、遠隔制御方法は、遠隔操作装置によって遠隔操作されることが可能な画像処理装置で実行される遠隔制御方法であって、ユーザーによる操作を受け付ける装置側操作受付ステップと、装置側操作受付ステップにおいて受け付けられた操作に対応する処理を実行する処理実行ステップと、遠隔操作装置と通信経路を確立した連携モードに設定する連携モード設定ステップと、連携モードにおいて、遠隔操作装置から受信される遠隔操作指令に従って処理を実行する遠隔制御ステップと、遠隔操作装置が操作を受け付けることに応じてユーザーに通知する第１の媒体の種類を取得する通知種類取得ステップと、連携モードに設定されていない場合は、装置側操作受付ステップにおいて操作が受け付けられることに応じて第２の媒体を用いてユーザーに通知する装置側通知ステップと、を含み、装置側通知ステップは、連携モードに設定されている場合は、第２の媒体が第１の媒体と異なる場合であって第１の媒体を用いてユーザーに通知可能な場合は、装置側操作受付ステップにおいて操作が受け付けられることに応じて、第２の媒体を用いることなく、第１の媒体を用いてユーザーに通知するステップを含む。
【００２７】
この局面に従えば、ユーザーによる操作に対する応答を、遠隔操作装置による画像処理装置の遠隔操作に対する応答と同じにすることが可能な遠隔制御方法を提供することができる。
【００２８】
この発明のさらに他の局面によれば、遠隔制御プログラムは、遠隔操作装置によって遠隔操作されることが可能な画像処理装置を制御するコンピューターで実行される遠隔制御プログラムであって、ユーザーによる操作を受け付ける装置側操作受付ステップと、装置側操作受付ステップにおいて受け付けられた操作に対応する処理を実行する処理実行ステップと、遠隔操作装置と通信経路を確立した連携モードに設定する連携モード設定ステップと、連携モードにおいて、遠隔操作装置から受信される遠隔操作指令に従って処理を実行する遠隔制御ステップと、遠隔操作装置が操作を受け付けることに応じてユーザーに通知する第１の媒体の種類を取得する通知種類取得ステップと、連携モードに設定されていない場合は、装置側操作受付ステップにおいて操作が受け付けられることに応じて第２の媒体を用いてユーザーに通知する装置側通知ステップと、をコンピューターに実行させ、装置側通知ステップは、連携モードに設定されている場合は、第２の媒体が第１の媒体と異なる場合であって第１の媒体を用いてユーザーに通知可能な場合は、装置側操作受付ステップにおいて操作が受け付けられることに応じて、第２の媒体を用いることなく、第１の媒体を用いてユーザーに通知するステップを含む。
【００２９】
この局面に従えば、ユーザーによる操作に対する応答を、遠隔操作装置による画像処理装置の遠隔操作に対する応答と同じにすることが可能な遠隔制御プログラムを提供することができる。
【図面の簡単な説明】
【００３０】
【図１】本発明の第１の実施の形態の１つにおける遠隔制御システムの全体概要を示す図である。
【図２】ＭＦＰの基本構成の概要を示すブロック図である。
【図３】携帯情報装置の構成の概要を示すブロック図である。
【図４】第１の実施の形態における携帯情報装置が備えるＣＰＵの機能の概要の一例を示すブロック図である。
【図５】第１の本実施の形態におけるＭＦＰが備えるＣＰＵの機能の一例を示すブロック図である。
【図６】第２の通知方法で通知する場合の操作画面の一例を示す第１の図である。
【図７】第２の通知方法で通知する場合の操作画面の一例を示す第２の図である。
【図８】第１の実施の形態における遠隔操作処理の流れの一例を示すフローチャートである。
【図９】第１の実施の形態における遠隔制御処理の流れの一例を示す第１のフローチャートである。
【図１０】第１の実施の形態における遠隔制御処理の流れの一例を示す第２のフローチャートである。
【図１１】第２の本実施の形態におけるＭＦＰが備えるＣＰＵの機能の一例を示すブロック図である。
【図１２】第２の実施の形態における携帯情報装置が備えるＣＰＵの機能の概要の一例を示すブロック図である。
【図１３】第２の実施の形態における遠隔操作処理の流れの一例を示すフローチャートである。
【図１４】第２の実施の形態における遠隔制御処理の流れの一例を示す第１のフローチャートである。
【図１５】第２の実施の形態における遠隔制御処理の流れの一例を示す第２のフローチャートである。
【発明を実施するための形態】
【００３１】
以下、本発明の実施の形態について図面を参照して説明する。以下の説明では同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがってそれらについての詳細な説明は繰返さない。
【００３２】
＜第１の実施の形態＞
図１は、本発明の第１の実施の形態の１つにおける遠隔制御システムの全体概要を示す図である。図１を参照して、遠隔制御システム１は、画像処理装置として機能するＭＦＰ１００，１００Ａ，１００Ｂと、無線局５と、ＭＦＰ１００，１００Ａ，１００Ｂのいずれかを遠隔操作可能な遠隔操作装置として機能する携帯情報装置２００，２００Ａ，２００Ｂと、を含む。ＭＦＰ（Ｍｕｌｔｉ  Ｆｕｎｃｔｉｏｎ  Ｐｅｒｉｐｈｅｒａｌ）１００，１００Ａ，１００Ｂ、および無線局５は、ネットワーク３に接続される。携帯情報装置２００，２００Ａ，２００Ｂは、無線局５を通して、ネットワーク３に接続される。
【００３３】
ネットワーク３は、ローカルエリアネットワーク（ＬＡＮ）であり、接続形態は有線または無線を問わない。また、ネットワーク３は、ＬＡＮに限らず、ワイドエリアネットワーク（ＷＡＮ）、公衆交換電話網（ＰＳＴＮ）、インターネット等であってもよい。
【００３４】
携帯情報装置２００，２００Ａ，２００Ｂは、スマートフォン、ＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔｓ）など、ユーザーが携帯して使用するしコンピューターである。携帯情報装置２００，２００Ａ，２００Ｂのハードウェア構成および機能は同じなので、ここでは特に言及しない限り携帯情報装置２００を例に説明する。ここでは、携帯情報装置２００を、スマートフォンとしており、無線ＬＡＮ機能と、通話機能とを備えている。このため、携帯情報装置２００は、携帯電話用基地局と無線で通信することにより携帯電話網に接続し、通話が可能である。
【００３５】
本実施の形態における遠隔制御システム１において、携帯情報装置２００，２００Ａ，２００Ｂそれぞれは、ＭＦＰ１００，１００Ａ，１００Ｂを遠隔操作する。この場合、携帯情報装置２００，２００Ａ，２００Ｂそれぞれは、ＭＦＰ１００，１００Ａ，１００Ｂを遠隔操作する遠隔操作装置として機能し、ＭＦＰ１００，１００Ａ，１００Ｂそれぞれは、携帯情報装置２００，２００Ａ，２００Ｂいずれかによって遠隔操作される遠隔制御装置として機能する。携帯情報装置２００，２００Ａ，２００Ｂには、ＭＦＰ１００，１００Ａ，１００Ｂを遠隔操作するための遠隔操作プログラムがインストールされる。遠隔操作プログラムは、ＭＦＰ１００，１００Ａ，１００Ｂに共通し、ＭＦＰ１００，１００Ａ，１００Ｂのいずれにも対応可能なアプリケーションプログラムである。一方、ＭＦＰ１００には、携帯情報装置２００により遠隔操作され、処理を実行する遠隔制御プログラムがインストールされている。ここでは、携帯情報装置２００がＭＦＰ１００を遠隔操作する場合を例に説明する。
【００３６】
本実施の形態における遠隔制御システム１において、ＭＦＰ１００，１００Ａ，１００Ｂの構成および実行可能な機能がそれぞれ異なる場合があるが、基本構成は同じである。ここでは、ＭＦＰ１００を例に、ＭＦＰ１００の基本構成を説明する。
【００３７】
図２は、ＭＦＰの基本構成の概要を示すブロック図である。図２を参照して、ＭＦＰ１００は、メイン回路１１０と、原稿を読み取るための原稿読取部１３０と、原稿を原稿読取部１３０に搬送するための自動原稿搬送装置１２０と、原稿読取部１３０が原稿を読み取って出力する画像データに基づいて用紙等に画像を形成するための画像形成部１４０と、画像形成部１４０に用紙を供給するための給紙部１５０と、画像が形成された用紙を処理する後処理部１５５と、ユーザーインターフェースとしての操作パネル１６０とを含む。
【００３８】
後処理部１５５は、画像形成部１４０により画像が形成された１以上の用紙を並び替えて排紙するソート処理、パンチ穴加工するパンチ処理、ステープル針を打ち込むステープル処理を実行する。
【００３９】
メイン回路１１０は、ＣＰＵ１１１と、通信インターフェース（Ｉ／Ｆ）部１１２と、ＲＯＭ１１３と、ＲＡＭ１１４と、大容量記憶装置としてのハードディスクドライブ（ＨＤＤ）１１５と、ファクシミリ部１１６と、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ  Ｄｉｓｋ  ＲＯＭ）１１８が装着される外部記憶装置１１７と、スピーカ１１９と、を含む。ＣＰＵ１１１は、自動原稿搬送装置１２０、原稿読取部１３０、画像形成部１４０、給紙部１５０、後処理部１５５および操作パネル１６０と接続され、ＭＦＰ１００の全体を制御する。
【００４０】
ＲＯＭ１１３は、ＣＰＵ１１１が実行するプログラム、またはそのプログラムを実行するために必要なデータを記憶する。ＲＡＭ１１４は、ＣＰＵ１１１がプログラムを実行する際の作業領域として用いられる。さらに、ＲＡＭ１１４は，設定値記憶領域を含む。設定値記憶領域は、機能を実行するための設定値を記憶する領域である。また、ＲＡＭ１１４は、原稿読取部１３０から連続的に送られてくる読取データ（画像データ）を一時的に記憶する。
【００４１】
通信Ｉ／Ｆ部１１２は、ＭＦＰ１００をネットワーク３に接続するためのインターフェースである。ＣＰＵ１１１は、通信Ｉ／Ｆ部１１２を介して、他のＭＦＰ１００Ａ，１００Ｂ、または携帯情報装置２００，２００Ａ，２００Ｂとの間で通信し、データを送受信する。また、通信Ｉ／Ｆ部１１２は、ネットワーク３を介してインターネットに接続されたコンピューターと通信が可能である。
【００４２】
ファクシミリ部１１６は、公衆交換電話網（ＰＳＴＮ）に接続され、ＰＳＴＮにファクシミリデータを送信する、またはＰＳＴＮからファクシミリデータを受信する。ファクシミリ部１１６は、受信したファクシミリデータを、ＨＤＤ１１５に記憶する、または画像形成部１４０に出力する。画像形成部１４０は、ファクシミリ部１１６により受信されたファクシミリデータを用紙にプリントする。また、ファクシミリ部１１６は、ＨＤＤ１１５に記憶されたデータをファクシミリデータに変換して、ＰＳＴＮに接続されたファクシミリ装置に送信する。
【００４３】
外部記憶装置１１７は、ＣＤ−ＲＯＭ１１８が装着される。ＣＰＵ１１１は、外部記憶装置１１７を介してＣＤ−ＲＯＭ１１８にアクセス可能である。ＣＰＵ１１１は、外部記憶装置１１７に装着されたＣＤ−ＲＯＭ１１８に記録されたプログラムをＲＡＭ１１４にロードして実行する。なお、ＣＰＵ１１１が実行するプログラムを記憶する媒体としては、ＣＤ−ＲＯＭ１１８に限られず、光ディスク（ＭＯ（Ｍａｇｎｅｔｉｃ  Ｏｐｔｉｃａｌ  ｄｉｓｃ）／ＭＤ（Ｍｉｎｉ  Ｄｉｓｃ）／ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｃ））、ＩＣカード、光カード、マスクＲＯＭ、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ  Ｐｒｏｇｒａｍｍａｂｌｅ  ＲＯＭ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ  ＥＰＲＯＭ）などの半導体メモリであってもよい。
【００４４】
また、ＣＰＵ１１１が実行するプログラムは、ＣＤ−ＲＯＭ１１８に記録されたプログラムに限られず、ＨＤＤ１１５に記憶されたプログラムをＲＡＭ１１４にロードして実行するようにしてもよい。この場合、ネットワーク３に接続された他のコンピューターが、ＭＦＰ１００のＨＤＤ１１５に記憶されたプログラムを書換える、または、新たなプログラムを追加して書き込むようにしてもよい。さらに、ＭＦＰ１００が、ネットワーク３に接続された他のコンピューターからプログラムをダウンロードして、そのプログラムをＨＤＤ１１５に記憶するようにしてもよい。ここでいうプログラムは、ＣＰＵ１１１が直接実行可能なプログラムだけでなく、ソースプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含む。
【００４５】
操作パネル１６０は、ＭＦＰ１００の上面に設けられる。操作パネル１６０は、表示部１６１と操作部１６３とを含む。表示部１６１は、例えば、液晶表示装置（ＬＣＤ）であり、ユーザーに対する指示メニューや取得した画像データに関する情報等を表示する。
【００４６】
操作部１６３は、タッチパネル１６５と、ハードキー部１６７とを含む。タッチパネル１６５は、静電容量方式である。なお、タッチパネル１６５は、静電容量方式に限らず、例えば、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式等の他の方式を用いることができる。
【００４７】
タッチパネル１６５は、検出面中でユーザーにより指示される位置を検出する。タッチパネル１６５の検出面は、表示部１６１の上面または下面に表示部１６１に重畳して設けられる。ここでは、タッチパネル１６５の検出面のサイズと、表示部１６１の表示面のサイズとを同じにしている。このため、表示面の座標系と検出面の座標系は同じである。タッチパネル１６５は、ユーザーが、表示部１６１の表示面を指示する位置を検出面で検出し、検出した位置の座標をＣＰＵ１１１に出力する。表示面の座標系と検出面の座標系は同じなので、タッチパネル１６５が出力する座標を、表示面の座標に置き換えることができる。以下、ユーザーが表示部１６１の表示面を指示することによりタッチパネル１６５が検出面で検出して出力する座標を、表示部１６１の表示面の座標ともいう。
【００４８】
タッチパネル１６５は、マルチタッチ対応のタッチパネルである。このため、タッチパネル１６５は、ユーザーが、表示部１６１の表示面を一度に複数個所を複数の指で指示する場合、検出面で表示部１６１の表示面中でユーザーにより指示された複数の位置を検出し、検出した複数の位置をそれぞれ示す複数の座標を、ＣＰＵ１１１に出力する。
【００４９】
ハードキー部１６７は、複数のハードキーを含む。ハードキーは、例えば接点スイッチである。タッチパネル１６５は、表示部１６１の表示面中でユーザーにより指示された位置を検出する。ユーザーがＭＦＰ１００を操作する場合は直立した姿勢となる場合が多いので、表示部１６１の表示面、タッチパネル１６５の操作面およびハードキー部１６７は、上方を向いて配置される。ユーザーが表示部１６１の表示面を容易に視認することができ、ユーザーが指で操作部１６３を容易に指示することができるようにするためである。
【００５０】
図３は、携帯情報装置の構成の概要を示すブロック図である。図３を参照して、本実施の形態における携帯情報装置２００は、携帯情報装置２００の全体を制御するためのＣＰＵ２０１と、カメラ２０２と、データを不揮発的に記憶するフラッシュメモリ２０３と、通話部２０５と接続された無線通信部２０４と、情報を表示する表示部２０６と、ユーザーの操作を受け付ける操作部２０７と、無線ＬＡＮＩ／Ｆ２０８と、バイブレータ２０９と、加速度センサー２１０と、外部記憶装置２１１と、を含む。
【００５１】
表示部２０６は、液晶表示装置（ＬＣＤ）、有機ＥＬＤ等の表示装置であり、画像を表示する。操作部２０７は、メインキー２０７Ａと、タッチパネル２０７Ｂとを備える。タッチパネル２０７Ｂは、静電容量方式である。なお、タッチパネル２０７Ｂは、静電容量方式に限らず、例えば、抵抗膜方式、表面弾性波方式、赤外線方式、電磁誘導方式等の他の方式を用いることができる。
【００５２】
タッチパネル２０７Ｂは、検出面中でユーザーにより指示される位置を検出する。タッチパネル２０７Ｂの検出面は、表示部２０６の上面または下面に表示部２０６に重畳して設けられる。ここでは、タッチパネル２０７Ｂの検出面のサイズと、表示部２０６の表示面のサイズとを同じにしている。このため、表示面の座標系と検出面の座標系は同じである。タッチパネル２０７Ｂは、ユーザーが、表示部２０６の表示面を指示する位置を検出面で検出し、検出した位置の座標をＣＰＵ２０１に出力する。表示面の座標系と検出面の座標系は同じなので、タッチパネル２０７Ｂが出力する座標を、表示面の座標に置き換えることができる。以下、ユーザーが表示部２０６の表示面を指示することによりタッチパネル２０７Ｂが検出面で検出して出力する座標を、表示部２０６の表示面の座標ともいう。
【００５３】
タッチパネル２０７Ｂは、マルチタッチ対応のタッチパネルである。このため、タッチパネル１６５は、ユーザーが、表示部２０６の表示面を一度に複数個所を複数の指で指示する場合、検出面で表示部２０６の表示面中でユーザーにより指示された複数の位置を検出し、検出した複数の位置をそれぞれ示す複数の座標を、ＣＰＵ２０１に出力する。
【００５４】
カメラ２０２は、レンズおよび光電変換素子を備え、レンズで集光した光を光電変換素子に結像し、光電変換素子は受光した光を光電変換して画像データをＣＰＵ２０１に出力する。光電変換素子は、ＣＭＯＳ(Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサー、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）センサー等である。
【００５５】
無線通信部２０４は、電話通信網に接続された携帯電話用基地局と無線通信する。無線通信部２０４は、携帯情報装置２００を電話通信網に接続し、通話部２０５を用いた通話を可能とする。無線通信部２０４は、携帯電話用基地局から受信した無線信号を復調した音声信号を復号して通話部２０５に出力する。また、無線通信部２０４は、通話部２０５から入力される音声を符号化し、携帯電話用基地局に送信する。通話部２０５は、マイクおよびスピーカを備え、無線通信部２０４から入力される音声をスピーカから出力し、マイクから入力される音声を無線通信部２０４に出力する。さらに、無線通信部２０４は、ＣＰＵ２０１により制御され、携帯情報装置２００を電子メールサーバーに接続し、電子メールを送受信する。
【００５６】
無線ＬＡＮＩ／Ｆ２０８は、無線局５と通信し、携帯情報装置２００をネットワーク３に接続するためのインターフェースである。携帯情報装置２００に、ＭＦＰ１００，１００Ａ，１００ＢそれぞれのＩＰ（Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）アドレスを登録しておくことにより、携帯情報装置２００は、ＭＦＰ１００，１００Ａ，１００Ｂと通信することができ、データの送受信が可能となる。なお、本実施の形態においては、携帯情報装置２００が無線ＬＡＮＩ／Ｆ２０８を用いて、ＭＦＰ１００，１００Ａ，１００Ｂと通信する場合を例に説明するが、他の通信方法を用いて通信するようにしてもよい。具体的には、携帯情報装置２００、ＭＦＰ１００，１００Ａ，１００Ｂが、例えばＢｌｕｅｔｏｏｔｈ（登録商標）等の近距離無線装置を搭載する場合には、携帯情報装置２００が、ＭＦＰ１００，１００Ａ，１００Ｂのいずれかと、１対１で通信するようにしてもよい。
【００５７】
フラッシュメモリ２０３は、ＣＰＵ２０１が実行するプログラム、またはそのプログラムを実行するために必要なデータを記憶する。ＣＰＵ２０１は、フラッシュメモリ２０３に記録されたプログラムを、ＣＰＵ２０１が備えるＲＡＭにロードして実行する。
【００５８】
バイブレータ２０９は、ＣＰＵ２０１により制御され、振動を発生する。バイブレータ２０９は、携帯情報装置２００の筐体に取り付けられ、モータと、その重心と異なる位置でモータの軸に取り付けられた重りとを、備える。バイブレータ２０９は、モータが回転することにより重りが回転し、振動する。バイブレータ２０９の振動が携帯情報装置２００の筐体に伝わり、携帯情報装置２００の全体が振動する。バイブレータ２０９は、モータの回転数によって、振動の周波数が定まる。
【００５９】
加速度センサー２１０は、Ｘ軸、Ｙ軸およびＺ軸の３方向の加速度を測定する３軸加速度センサーである。加速度センサー２１０は、検出した加速度をＣＰＵ２０１に出力する。
【００６０】
外部記憶装置２１１は、携帯情報装置２００に着脱自在であり、遠隔操作プログラムを記憶したＣＤ−ＲＯＭ２１１Ａが装着可能である。ＣＰＵ２０１は、外部記憶装置２１１を介してＣＤ−ＲＯＭ２１１Ａにアクセス可能である。ＣＰＵ２０１は、外部記憶装置２１１に装着されたＣＤ−ＲＯＭ２１１Ａに記録された遠隔操作プログラムを、ＣＰＵ２０１が備えるＲＡＭにロードして実行することが可能である。
【００６１】
なお、ＣＰＵ２０１が実行するプログラムとして、フラッシュメモリ２０３またはＣＤ−ＲＯＭ２１１Ａに記録されたプログラムについて説明したが、ネットワーク３に接続された他のコンピューターが、フラッシュメモリ２０３に記憶されたプログラムを書換えたプログラム、または、追加して書き込んだ新たなプログラムであってもよい。さらに、携帯情報装置２００が、ネットワーク３に接続された他のコンピューターからダウンロードしたプログラムでもよい。ここでいうプログラムは、ＣＰＵ２０１が直接実行可能なプログラムだけでなく、ソースプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含む。
【００６２】
なお、ＣＰＵ２０１が実行するプログラムを記憶する媒体としては、ＣＤ−ＲＯＭ２１１Ａに限られず、光ディスク（ＭＯ／ＭＤ／ＤＶＤ）、ＩＣカード、光カード、マスクＲＯＭ、ＥＰＲＯＭ、ＥＥＰＲＯＭなどの半導体メモリであってもよい。
【００６３】
図４は、第１の実施の形態における携帯情報装置が備えるＣＰＵの機能の概要の一例を示すブロック図である。図４に示す機能は、携帯情報装置２００が備えるＣＰＵ２０１が、フラッシュメモリ２０３、またはＣＤ−ＲＯＭ２１１Ａに記憶された遠隔操作プログラムを実行することにより、ＣＰＵ２０１に形成される機能である。図４を参照して、ＣＰＵ２０１は、遠隔操作部２５１と、遠隔側表示制御部２５３と、遠隔側操作受付部２５５と、操作通知部２５７と、を含む。
【００６４】
遠隔操作部２５１は、遠隔操作の対象となる遠隔制御装置との間で通信経路を確立する。具体的には、遠隔操作部２５１は、ユーザーが操作部２０７を操作して、ＭＦＰ１００，１００Ａ，１００Ｂのいずれかを遠隔操作の対象となる遠隔制御装置として指示すれば、無線ＬＡＮＩ／Ｆ２０８を制御して、遠隔制御装置に接続要求を送信し、遠隔制御装置との間の通信経路を確立する。ここでは、ユーザーがＭＦＰ１００を遠隔制御装置に指示した場合を例に説明する。この場合、遠隔操作部２５１は、ＭＦＰ１００との間で通信経路を確立する。
【００６５】
遠隔操作部２５１は、無線ＬＡＮＩ／Ｆ２０８を制御して、ＭＦＰ１００が送信する画像を受信し、ＭＦＰ１００から受信された画像を遠隔側表示制御部２５３に出力する。遠隔側表示制御部２５３は、表示部２０６を制御し、遠隔操作部２５１から入力される画像を表示部２０６に表示させるとともに、その画像を遠隔側操作受付部２５５に出力する。ＭＦＰ１００が送信する画像は、操作画面の画像である。
【００６６】
遠隔側操作受付部２５５は、遠隔側表示制御部２５３から画像が入力され、タッチパネル２０７Ｂから座標が入力される。遠隔側操作受付部２５５は、タッチパネル２０７Ｂから座標が入力されることに応じて、その座標に対応する遠隔側表示制御部２５３から入力される画像中の位置を特定し、画像中の位置を示す座標を遠隔操作部２５１に出力するとともに、操作通知部２５７に通知指示を出力する。
【００６７】
遠隔操作部２５１は、遠隔側操作受付部２５５から座標が入力されることに応じて、無線ＬＡＮＩ／Ｆ２０８を制御して、ＭＦＰ１００に遠隔側操作受付部２５５から入力される座標を送信する。
【００６８】
操作通知部２５７は、遠隔側操作受付部２５５から通知指示が入力されることに応じて、操作を受け付けたことをユーザーに通知する。操作通知部２５７は、複数の通知方法で操作を受け付けたことをユーザーに通知することが可能である。複数の通知方法は、媒体により区別される。ここでは、操作通知部２５７は、振動を媒体とした通知方法、音を媒体とした通知方法および画像を媒体とした通知方法のいずれかで操作を受け付けたことをユーザーに通知することが可能としている。また、操作通知部２５７は、通知の程度を異ならせることができる。予め定められた程度の範囲のうちから通知のための程度が予め定めている。操作通知部２５７は、通知することが可能な程度の範囲内で予め定められた程度で通知する。
【００６９】
操作通知部２５７は、振動を媒体とした通知方法、音を媒体とした通知方法、画像を媒体とした通知方法のいずれかをデフォルトで定めている。操作通知部２５７は、振動を媒体とした通知方法がデフォルトで定められている場合、バイブレータ２０９を制御して、バイブレータ２０９を振動させることが可能な周波数の範囲内の予め定められた周波数でバイブレータ２０９を駆動する。これにより、バイブレータ２０９が予め定められた周波数で振動することによって、操作を受け付けたことがユーザーに通知される。
【００７０】
操作通知部２５７は、音を媒体とした通知方法がデフォルトで定められている場合、通話部２０５が備えるスピーカを制御して、スピーカが出力可能な音の大きさの範囲内の予め定められた大きさで音を発生させる。これにより、スピーカから予め定められた大きさの音を発生することによって、操作を受け付けたことがユーザーに通知される。
【００７１】
操作通知部２５７は、画像を媒体とした通知方法がデフォルトで定められている場合、表示部２０６の表示面中でタッチパネル２０７Ｂから入力される座標で特定される位置に、予め定められた画像を大きさの範囲内の予め定められた大きさで、表示部２０６に表示されている画像に重畳して表示する。これにより、表示部２０６のユーザーにより指示された位置に予め定められた画像を予め定められた大きさで表示することによって、操作を受け付けたことがユーザーに通知される。
【００７２】
遠隔操作部２５１は、通知情報送信部２６１を含む。通知情報送信部２６１は、遠隔制御装置であるＭＦＰ１００との間で通信経路が確立すると、ＭＦＰ１００に通知情報を送信する。通知情報は、操作通知部２５７が通知に用いる媒体の種類と、程度の範囲および程度とを含む。操作通知部２５７は、振動を媒体とした通知方法がデフォルトで定められている場合、媒体の種類を「振動」とし、程度の範囲を操作通知部２５７がバイブレータ２０９を振動させることが可能な周波数の範囲とし、程度を、バイブレータ２０９を振動させるために予め定められた周波数とした通知情報を送信する。操作通知部２５７は、音を媒体とした通知方法がデフォルトで定められている場合、媒体の種類を「音」とし、程度の範囲を通話部２０５が備えるスピーカが出力可能な音の大きさの範囲とし、程度を、スピーカから音を出力するために予め定められた大きさとした通知情報を送信する。操作通知部２５７は、画像を媒体とした通知方法がデフォルトで定められている場合、媒体の種類を「画像」とし、程度の範囲を画像を表示するために予め定められたサイズの範囲とし、程度を、画像を表示するために予め定められた大きさとした通知情報を送信する。
【００７３】
図５は、第１の本実施の形態におけるＭＦＰが備えるＣＰＵの機能の一例を示すブロック図である。図５に示す機能は、ＭＦＰ１００が備えるＣＰＵ１１１が、ＲＯＭ１１３、ＨＤＤ１１５、ＣＤ−ＲＯＭ１１８に記憶された制御プログラムを実行することにより、ＣＰＵ１１１に形成される機能である。
【００７４】
図５を参照して、ＣＰＵ１１１は、連携モード設定部５１と、操作権限切換部５３と、遠隔制御部５５と、装置側表示制御部５７と、装置側操作受付部５９と、処理実行部６１と、装置側通知部６３と、通知情報取得部６５と、を含む。
【００７５】
連携モード設定部５１は、ＭＦＰ１００を連携モードに設定する。連携モード設定部５１は、通信Ｉ／Ｆ部１１２を制御して、遠隔操作装置からの要求に応じて遠隔操作装置との間で通信経路を確立する。連携モード設定部５１は、遠隔操作装置との間で通信経路を確立すると、連携モードに設定する。連携モード設定部５１は、遠隔操作装置との間の通信経路が確立されている間、連携モードを維持し、遠隔操作装置との間の通信経路が切断されることに応じて、連携モードを解除する。連携モード設定部５１は、連携モードに設定すると、遠隔操作装置との間で確立された通信経路を識別するための経路識別情報を、遠隔制御部５５および通知情報取得部６５に出力する。また、連携モード設定部５１は、連携モードに設定している間、操作権限切換部５３に連携モードであることを示す連携信号を出力する。
【００７６】
ここでは、携帯情報装置２００をＭＦＰ１００の遠隔操作装置としているので、連携モード設定部５１は、通信Ｉ／Ｆ部１１２が、携帯情報装置２００から接続要求を受信すると、携帯情報装置２００との間の通信経路を確立し、連携モードに設定する。
【００７７】
操作権限切換部５３は、連携モード設定部５１から入力される連携信号に基づいて、連携モードに設定されていることを検出する。操作権限切換部５３は、連携モードに設定されている間、操作権限を有する装置を、タッチパネル１６５と遠隔操作装置である携帯情報装置２００のいずれかに切り換える。操作権限切換部５３は、連携モードが開始された段階、換言すれば、連携モード設定部５１から連携信号が最初に入力された段階では、操作権限を、携帯情報装置２００に切り換える。操作権限切換部５３は、操作権限を遠隔操作装置に切り換えている状態で、操作パネル１６０のハードキー部１６７が有する複数のハードキーのうち予め定められた切換キーがユーザーにより指示されることに応じて、操作権限をタッチパネル１６５に切り換える。また、操作権限切換部５３は、操作権限をタッチパネル１６５に切り換えている状態で、操作パネル１６０のハードキー部１６７が有する切換キーがユーザーにより指示されることに応じて、操作権限を遠隔操作装置に切り換える。操作権限切換部５３は、遠隔操作装置およびタッチパネル１６５のいずれに操作権限を切り換えているかを示す切換信号を、装置側操作受付部５９、装置側表示制御部５７および装置側通知部６３に出力する。切換信号は、操作権限を遠隔操作装置に切り換えている場合には遠隔操作装置に操作権限があることを示し、操作権限をタッチパネル１６５に切り換えている場合にはタッチパネル１６５に操作権限があることを示す。なお、ここでは、切換キーをユーザーが指示することにより操作権限を切り換えるようにしたが、別の方法を用いて操作権限を切り換えるようにしてもよい。例えば、遠隔操作装置である携帯情報装置２００が操作権限を切り換えるタイミングを決定するようにしてもよい。また、操作権限切換部５３は、携帯情報装置２００が所定のアプリケーションプログラムを実行する場合には、操作権限をタッチパネル１６５および携帯情報装置２００の双方に割り当てるようにしてもよい。
【００７８】
装置側操作受付部５９は、ユーザーの操作を受け付けるための操作画面の表示を、装置側表示制御部５７に指示し、ユーザーが操作画面に従って操作部１６３に入力する操作を受け付ける。装置側操作受付部５９は、ユーザーによる操作を受け付けることに応じて、装置側通知部６３に通知指示を出力する。具体的には、装置側操作受付部５９は、操作画面を識別するための操作画面識別情報を装置側表示制御部５７に出力する。装置側操作受付部５９は、初期段階において、予め定められた操作画面の画面識別情報を装置側表示制御部５７に出力する。初期段階は、例えば、ＭＦＰ１００に電源が投入された時、または、電力消費の少ないスリープ状態から復帰した時、等である。
【００７９】
装置側表示制御部５７は、操作権限切換部５３から切換信号が入力される場合がある。装置側表示制御部５７は、操作権限切換部５３から切換信号が入力されない場合は、装置側操作受付部５９から画面識別情報が入力されることに応じて、画面識別情報で特定される操作画面の画像をＨＤＤ１１５から読み出し、読み出された操作画面の画像を、表示部１６１に表示する。
【００８０】
装置側表示制御部５７は、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から画面識別情報が入力されることに応じて、画面識別情報で特定される操作画面の画像をＨＤＤ１１５から読み出し、ＨＤＤ１１５から読み出された操作画面の画像を、遠隔制御部５５に出力する。また、装置側表示制御部５７は、遠隔操作装置に操作権限があることを示す切換信号が入力される場合は、表示部１６１に遠隔操作中であることを示す画像を表示する。これにより、操作権限がタッチパネル１６５に切り換えられている場合には、表示部１６１に操作画面の画像が表示され、操作権限が遠隔操作装置に切り換えられている場合には、表示部１６１に遠隔操作中であることを示す画像が表示されるので、ユーザーは、表示部１６１に表示された画像を見ることによって、タッチパネル１６５と、遠隔操作装置とのいずれを操作可能であるかを知ることができる。
【００８１】
装置側操作受付部５９は、操作権限切換部５３から切換信号が入力されない場合、または、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、タッチパネル１６５を制御する。装置側操作受付部５９は、装置側表示制御部５７に画面識別情報を出力した後に、タッチパネル１６５から座標が入力されることに応じて、タッチパネル１６５から入力される座標に基づいて、ユーザーによる操作を決定する。装置側操作受付部５９は、ユーザーによる操作を決定する場合、装置側通知部６３に通知指示を出力する。
【００８２】
装置側操作受付部５９は、タッチパネル１６５から入力された座標に基づいて、操作画面中でユーザーにより指示された位置を特定する。具体的には、表示部１６１に表示されている操作画面の画像中でタッチパネル１６５から入力された座標によって特定される位置を、ユーザーにより指示された操作画面中の位置に特定する。装置側操作受付部５９は、操作画面中で特定された位置に対応する操作を決定する。例えば、操作画面が、設定値を設定する操作が割り当てられた設定ボタンを含む場合に、操作画面中でユーザーにより指示された位置がその設定ボタンの範囲内ならば、設定値を設定する操作を特定し、設定値を設定する指令を処理実行部６１に出力する。操作画面が、処理の実行を指示する操作が割り当てられた実行指示ボタンを含む場合に、操作画面中でユーザーにより指示された位置がその実行指示ボタンの範囲内ならば、実行指示操作を特定し、ボタンで特定される種類の処理を実行する指令を処理実行部６１に出力する。また、装置側操作受付部５９は、操作画面が、別の操作画面に表示を切り換える操作が割り当てられた遷移ボタンを含む場合に、操作画面中でユーザーにより指示された位置がその遷移ボタンの範囲内ならば、画面を遷移する操作を特定し、遷移ボタンに関連付けられた画面識別情報を装置側表示制御部５７に出力する。
【００８３】
また、携帯情報装置２００が所定のアプリケーションプログラムを実行する場合は、携帯情報装置２００は、文字のデータを返信する場合がある。遠隔制御部５５は、通信Ｉ／Ｆ部１１２が、携帯情報装置２００から文字のデータを受信することに応じて、受信された文字のデータを装置側操作受付部５９に出力する。装置側操作受付部５９は、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、遠隔制御部５５から文字のデータが入力されることに応じて、操作画面中でその時点でタッチパネル１６５によって指示された位置で定まる領域に対応する設定項目に、文字のデータを設定値として設定する指令を、処理実行部６１に出力する。
【００８４】
処理実行部６１は、通信Ｉ／Ｆ部１１２、ファクシミリ部１１６、ＨＤＤ１１５、外部記憶装置１１７、自動原稿搬送装置１２０、原稿読取部１３０、画像形成部１４０、給紙部１５０、および後処理部１５５を制御し、処理を実行する。処理実行部６１は、装置側操作受付部５９から設定値を設定する指令が入力されることに応じて、設定値を設定する処理を実行する。また、処理実行部６１は、装置側操作受付部５９は、処理を実行する指令が入力されることに応じて、その指令で特定される種類の処理を実行する。処理実行部６１が実行する処理の一例は、スキャン処理、コピー処理、プリント処理およびファクシミリ送受信処理等である。スキャン処理は、原稿読取部１３０で読み取った原稿の画像を、ＨＤＤ１１５、外部記憶装置１１７および通信Ｉ／Ｆ部１１２の少なくとも１つに出力する処理である。コピー処理は、原稿読取部１３０で読み取った原稿の画像を、画像形成部１４０に給紙部１５０から供給される用紙に画像形成させる処理である。プリント処理は、通信Ｉ／Ｆ部１１２を介してネットワークに接続されたコンピューターから受信されるプリントデータの画像、ＨＤＤ１１５または外部記憶装置１１７に記憶されたデータの画像を、画像形成部１４０に給紙部１５０から供給される用紙に画像形成させる処理である。ファクシミリ送信処理は、ファクシミリデータの画像をファクシミリ部１１６に送信させる処理である。ファクシミリ受信処理は、外部から受信されるファクシミリデータの画像を、画像形成部１４０、ＨＤＤ１１５、外部記憶装置１１７および通信Ｉ／Ｆ部１１２の少なくとも１つに出力する処理である。
【００８５】
遠隔制御部５５は、装置側表示制御部５７から操作画面の画像が入力される。遠隔制御部５５は、連携モード設定部５１から経路識別情報が入力される場合、通信Ｉ／Ｆ部１１２を制御して、装置側表示制御部５７から入力される操作画面の画像を、経路識別情報で特定される通信経路で携帯情報装置２００に送信する。また、遠隔制御部５５は、連携モード設定部５１から入力される経路識別情報で特定される通信経路が確立されている間、装置側表示制御部５７から操作画面の画像が入力されるごとに、操作画面の画像を携帯情報装置２００に送信する。
【００８６】
操作画面の画像を受信する遠隔操作装置である携帯情報装置２００は、上述したように、送信した操作画面の画像中の位置を示す座標を返信する場合がある。遠隔制御部５５は、通信Ｉ／Ｆ部１１２が、携帯情報装置２００から座標を受信することに応じて、受信された座標を装置側操作受付部５９に出力する。
【００８７】
装置側操作受付部５９は、操作権限切換部５３から遠隔操作装置に操作権限があることを示す切換信号が入力される場合は、タッチパネル１６５を制御することなく、遠隔制御部５５から座標が入力されることに応じて、タッチパネル１６５から座標が入力される場合と同様に、遠隔制御部５５から入力される座標に基づいて、ユーザーによる操作を決定する。装置側操作受付部５９は、遠隔制御部５５から入力された座標に基づいて、操作画面中でユーザーにより指示された位置を特定する。具体的には、操作画面の画像中で遠隔制御部５５から入力された座標によって特定される位置を、ユーザーにより指示された操作画面中の位置に特定し、操作画面中で特定された位置に対応する操作を決定する。装置側操作受付部５９は、操作権限切換部５３から遠隔操作装置に操作権限があることを示す切換信号が入力される場合は、ユーザーによる操作を決定する場合であっても、通知指示を装置側通知部６３に出力しない。
【００８８】
通知情報取得部６５は、連携モード設定部５１から経路識別情報が入力される場合、通信Ｉ／Ｆ部１１２を制御して、経路識別情報で特定される通信経路を介して遠隔操作装置である携帯情報装置２００と通信し、携帯情報装置２００から通知情報を取得する。通知情報取得部６５は、取得された通知情報を装置側通知部６３に出力する。
【００８９】
装置側通知部６３は、複数の通知方法で操作を受け付けたことをユーザーに通知することが可能である。ここでは、装置側通知部６３は、第１の通知方法および第２の通知方法の２つの通知方法で操作を受け付けたことをユーザーに通知することが可能としている。通知方法は、通知に用いる媒体により定まる。第１の通知方法は、音を媒体とし、第２の通知方法は、画像を媒体とする。また、装置側通知部６３は、通知の程度を異ならせることができる。予め定められた程度の範囲のうちから通知のための程度が予め定めている。装置側通知部６３は、通知することが可能な程度の範囲内で予め定められた程度で通知する。
【００９０】
装置側通知部６３は、操作権限切換部５３から切換信号が入力される場合がある。装置側通知部６３は、操作権限切換部５３から切換信号が入力されない場合は、装置側操作受付部５９から通知指示が入力されることに応じて、デフォルトで定められた通知方法および程度で、操作を受け付けたことをユーザーに通知する。
【００９１】
また、装置側通知部６３は、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、通知情報取得部６５から入力される通知情報に基づいて、通知方法および程度を決定する。通知情報は、媒体の種類と、程度の範囲および程度とを含む。
【００９２】
装置側通知部６３は、通知情報に含まれる媒体の種類と、デフォルトで定められた通知方法の媒体の種類とを比較し、両者が同じであれば、デフォルトで定められた通知方法を決定する。装置側通知部６３は、デフォルトで定められた通知方法を決定する場合、通知情報に含まれる程度と、デフォルトで定められた程度を比較し、両者が同じであれば、デフォルトで定められた程度を決定するが、両者が異なれば、通知情報に含まれる範囲および程度に基づいて、デフォルトで定められた通知方法で通知するための程度を決定する。
【００９３】
装置側通知部６３は、通知情報に含まれる媒体の種類と、デフォルトで定められた通知方法の媒体の種類とが異なる場合、通知情報に含まれる媒体の種類の通知方法で通知可能であれば、通知情報に含まれる媒体の種類の通知方法に決定する。装置側通知部６３は、通知情報に含まれる媒体の種類の通知方法に決定する場合、通知情報に含まれる範囲および程度に基づいて通知情報に含まれる媒体の種類の通知方法で通知するための程度を決定する。
【００９４】
装置側通知部６３は、通知情報に含まれる媒体の種類と、デフォルトで定められた通知方法の媒体の種類とが異なる場合、通知情報に含まれる媒体の種類の通知方法で通知不可能ならば、通知可能な通知方法のいずれかに決定する。また、装置側通知部６３は、通知情報に含まれる程度の範囲と程度とに基づいて、決定された通知方法で通知する程度を決定する。通知情報に含まれる程度が通知情報に含まれる程度の範囲に対する割合を算出し、決定された通知方法で通知する程度の範囲に対して、算出された割合と同じ割合となる程度を決定する。
【００９５】
装置側通知部６３は、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されることに応じて、決定された通知方法で定まる媒体を用いて、決定された程度で通知する。装置側通知部６３は、操作権限切換部５３から遠隔操作装置に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されても通知しない。
【００９６】
以下、装置側通知部６３の動作について、遠隔操作装置である携帯情報装置２００から取得されている通信情報を場合分けして説明する。
【００９７】
＜携帯情報装置において振動を媒体とした通知方法がデフォルトの場合＞
この場合、携帯情報装置２００は、タッチパネル２０７Ｂがユーザーにより指示された位置を検出することに応じて、バイブレータ２０９を予め定められた周波数で振動させる。このため、通知情報取得部６５が携帯情報装置２００から取得する通知情報は、媒体の種類が「振動」、程度の範囲が周波数の範囲、程度が周波数である。
【００９８】
（１）装置側通知部６３において、デフォルトで通知方法が定められていない場合。
【００９９】
装置側通知部６３は、通知方法が定められていないので、操作権限切換部５３から切換信号が入力されない場合は、装置側操作受付部５９から通知指示が入力されても操作を受け付けたことをユーザーに通知しない。
【０１００】
通知情報取得部６５が携帯情報装置２００から取得する通知情報は、媒体の種類が「振動」、程度の範囲が周波数の範囲、程度が周波数なので、通知情報に含まれる媒体の種類と、デフォルトで定められた通知方法の媒体の種類とが異なる。また、装置側通知部６３は、通知情報に含まれる媒体の種類である「振動」による通知方法で通知することができない。このため、装置側通知部６３は、第１の通知方法と第２の通知方法とのいずれかを決定する。第１の通知方法と第２の通知方法とのいずれかを決定するかは、任意に選択するようにしてもよいし、予め定めておいてもよい。装置側通知部６３は、通知情報に含まれる程度が通知情報に含まれる程度の範囲に対する割合を算出する。例えば、通知情報に含まれる周波数が、通知情報に含まれる周波数の範囲に対する割合を６０％とする。
【０１０１】
（１−１）第１の通知方法を決定する場合
第１の通知方法は、音を媒体とし、程度を音の大きさとしている。装置側通知部６３は、スピーカ１１９で発生可能な音の大きさの範囲の６０％の大きさで音を発生するように設定する。装置側通知部６３は、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されることに応じて、スピーカ１１９を制御して、決定された程度の大きさで音を出力させる。このため、携帯情報装置２００でユーザーがタッチパネル２０７Ｂを指示すると、携帯情報装置２００によってバイブレータ２０９が振動して振動によって操作を受け付けたことがユーザーに通知されるのに対して、ＭＦＰ１００に操作権限を切り換えて、タッチパネル１６５を指示すると、ユーザーに操作を受け付けたことが音によって聴覚的に通知される。また、ユーザーに通知する音の大きさは、ＭＦＰ１００が出力可能な音の大きさの範囲に対して、携帯情報装置２００における振動の周波数が携帯情報装置２００で振動可能な周波数の範囲に対する割合と同じ割合の大きさなので、携帯情報装置２００における通知の程度に比例する程度の大きさの音で通知することができる。
【０１０２】
装置側通知部６３は、操作権限切換部５３から携帯情報装置２００に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されてもスピーカ１１９を制御しない。
【０１０３】
（１−２）第２の通知方法を決定する場合
第２の通知方法は、画像を媒体とし、程度を画像の大きさとしている。装置側通知部６３は、表示部１６１に表示する画像の大きさの範囲の６０％の大きさで画像を表示するように設定する。装置側通知部６３は、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されることに応じて、表示部１６１の表示面中でタッチパネル１６５から入力される座標で特定される位置に、予め定められた画像を設定された大きさで、表示部１６１に表示されている画像に重畳して表示する。このため、携帯情報装置２００でユーザーがタッチパネル２０７Ｂを指示すると、携帯情報装置２００によってバイブレータ２０９が振動して振動によって操作を受け付けたことがユーザーに通知されるのに対して、ＭＦＰ１００に操作権限を切り換えて、タッチパネル１６５を指示すると、ユーザーに操作を受け付けたことが画像を表示することによって視覚的に通知される。ここでの画像は、振動を連想させる画像であることが好ましい。例えば、音符の画像、または、波紋が広がる動画とするのが好ましい。また、ユーザーに通知する画像の大きさは、ＭＦＰ１００が出力可能な画像の大きさの範囲に対して、携帯情報装置２００における振動の周波数が携帯情報装置２００で振動可能な周波数の範囲に対する割合と同じ割合の大きさなので、携帯情報装置２００における通知の程度に比例する程度の大きさの画像で通知することができる。
【０１０４】
装置側通知部６３は、操作権限切換部５３から携帯情報装置２００に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されても通知しない。
【０１０５】
（２）装置側通知部６３において、デフォルトで第１の通知方法が定められている場合
装置側通知部６３は、第１の通知方法が定められているので、操作権限切換部５３から切換信号が入力されない場合は、装置側操作受付部５９から通知指示が入力されることに応じて、スピーカ１１９を制御して、デフォルトで定められた大きさの音を出力させる。
【０１０６】
通知情報に含まれる媒体の種類と、デフォルトで定められた第１の通知方法の媒体の種類とが異なる。また、装置側通知部６３は、通知情報に含まれる媒体の種類である「振動」による通知方法で通知することができない。このため、装置側通知部６３は、第１の通知方法を決定する。装置側通知部６３は、通知情報に含まれる程度が通知情報に含まれる程度の範囲に対する割合を算出する。例えば、通知情報に含まれる周波数が通知情報に含まれる周波数の範囲に対する割合を６０％とする。装置側通知部６３は、スピーカ１１９で発生可能な音の大きさの範囲の６０％の大きさで音を発生するように設定する。
【０１０７】
装置側通知部６３は、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されることに応じて、スピーカ１１９を制御して、決定された程度の大きさで音を出力させる。このため、携帯情報装置２００でユーザーがタッチパネル２０７Ｂを指示すると、携帯情報装置２００によってバイブレータ２０９が振動して振動によって操作を受け付けたことがユーザーに通知されるのに対して、ＭＦＰ１００に操作権限を切り換えて、タッチパネル１６５を指示すると、ユーザーに操作を受け付けたことが音によって聴覚的に通知される。ここでの音は、振動を連想させる音であることが好ましい。例えば、バイブレータ２０９が振動する際に発生する音を模した音とするのが好ましい。また、ユーザーに通知する音の大きさは、ＭＦＰ１００が出力可能な音の大きさの範囲に対して、携帯情報装置２００における振動の周波数が携帯情報装置２００で振動可能な周波数の範囲に対する割合と同じ割合の大きさなので、携帯情報装置２００における通知の程度に比例する程度の大きさの音で通知することができる。
【０１０８】
装置側通知部６３は、操作権限切換部５３から携帯情報装置２００に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されてもスピーカ１１９を制御しない。
【０１０９】
（３）装置側通知部６３において、デフォルトで第２の通知方法が定められている場合
装置側通知部６３は、第２の通知方法が定められているので、操作権限切換部５３から切換信号が入力されない場合は、装置側操作受付部５９から通知指示が入力されることに応じて、表示部１６１の表示面中でタッチパネル１６５から入力される座標で特定される位置に、デフォルトで定められた画像をデフォルトで定められた大きさで、表示部１６１に表示されている画像に重畳して表示する。
【０１１０】
通知情報に含まれる媒体の種類と、デフォルトで定められた第２の通知方法の媒体の種類とが異なる。また、装置側通知部６３は、通知情報に含まれる媒体の種類である「振動」による通知方法で通知することができない。このため、装置側通知部６３は、第２の通知方法を決定する。装置側通知部６３は、通知情報に含まれる程度が通知情報に含まれる程度の範囲に対する割合を算出する。例えば、通知情報に含まれる周波数が通知情報に含まれる周波数の範囲に対する割合を６０％とする。装置側通知部６３は、表示部１６１に表示する画像の大きさの範囲の６０％の大きさで画像を表示するように設定する。
【０１１１】
装置側通知部６３は、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されることに応じて、表示部１６１の表示面中でタッチパネル１６５から入力される座標で特定される位置に、デフォルトで定められた画像をデフォルトで定められた大きさで、表示部１６１に表示されている画像に重畳して表示する。ここでの画像は、振動を連想させる画像であることが好ましい。例えば、音符の画像、または、波紋が広がる動画とするのが好ましい。また、ユーザーに通知する画像の大きさは、ＭＦＰ１００が出力可能な画像の大きさの範囲に対して、携帯情報装置２００における振動の周波数が携帯情報装置２００で振動可能な周波数の範囲に対する割合と同じ割合の大きさなので、携帯情報装置２００における通知の程度に比例する程度の大きさの画像で通知することができる。
【０１１２】
装置側通知部６３は、操作権限切換部５３から携帯情報装置２００に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されても通知しない。
【０１１３】
＜携帯情報装置において音を媒体とした通知方法がデフォルトの場合＞
この場合、携帯情報装置２００は、タッチパネル２０７Ｂがユーザーにより指示された位置を検出することに応じて、所定の大きさの音を発生する。このため、通知情報取得部６５が携帯情報装置２００から取得する通知情報は、媒体の種類が「音」、程度の範囲が音の大きさの範囲、程度が音の大きさである。
【０１１４】
（１）装置側通知部６３において、デフォルトで通知方法が定められていない場合。
【０１１５】
通知情報に含まれる媒体の種類と、デフォルトで定められた通知方法の媒体の種類とが異なる。また、装置側通知部６３は、通知情報に含まれる媒体の種類である「音」による第１の通知方法で通知することが可能である。このため、装置側通知部６３は、第１の通知方法を決定する。装置側通知部６３は、通知情報に含まれる程度が通知情報に含まれる程度の範囲に対する割合を算出する。例えば、通知情報に含まれる周波数が通知情報に含まれる周波数の範囲に対する割合を６０％とする。装置側通知部６３は、スピーカ１１９で発生可能な音の大きさの範囲の６０％の大きさで音を発生するように設定する。
【０１１６】
装置側通知部６３は、操作権限切換部５３から切換信号が入力されない場合は、装置側操作受付部５９から通知指示が入力されても操作を受け付けたことをユーザーに通知しない。装置側通知部６３は、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されることに応じて、スピーカ１１９を制御して、決定された程度の大きさで音を出力させる。
【０１１７】
（２）装置側通知部６３において、デフォルトで第１の通知方法が定められている場合
通知情報に含まれる媒体の種類と、デフォルトで定められた第１の通知方法の媒体の種類とが同じである。このため、装置側通知部６３は、第１の通知方法を決定する。装置側通知部６３は、通知情報に含まれる程度が通知情報に含まれる程度の範囲に対する割合を算出する。例えば、通知情報に含まれる周波数が通知情報に含まれる周波数の範囲に対する割合を６０％とする。装置側通知部６３は、スピーカ１１９で発生可能な音の大きさの範囲の６０％の大きさで音を発生するように設定する。
【０１１８】
装置側通知部６３は、操作権限切換部５３から切換信号が入力されない場合は、装置側操作受付部５９から通知指示が入力されることに応じて、スピーカ１１９を制御してデフォルトで定められた音をデフォルトで定められた大きさで発生させる。装置側通知部６３は、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されることに応じて、スピーカ１１９を制御して、決定された程度の大きさで音を出力させる。
【０１１９】
（３）装置側通知部６３において、デフォルトで第２の通知方法が定められている場合
通知情報に含まれる媒体の種類と、デフォルトで定められた第２の通知方法の媒体の種類とが異なる。また、装置側通知部６３は、通知情報に含まれる媒体の種類である「音」による第１の通知方法で通知することが可能である。このため、装置側通知部６３は、第１の通知方法を決定する。装置側通知部６３は、第１の通知方法を決定する場合、通知情報に含まれる程度が通知情報に含まれる程度の範囲に対する割合を算出する。例えば、通知情報に含まれる音の大きさが、通知情報に含まれる音の大きさの範囲に対する割合を６０％とする。装置側通知部６３は、スピーカ１１９で発生可能な音の大きさの範囲の６０％の大きさで音を発生するように設定する。
【０１２０】
装置側通知部６３は、操作権限切換部５３から切換信号が入力されない場合は、装置側操作受付部５９から通知指示が入力されることに応じて、表示部１６１の表示面中でタッチパネル１６５から入力される座標で特定される位置に、デフォルトで定められた画像を、デフォルトで定められた大きさで、表示部１６１に表示されている画像に重畳して表示する。装置側通知部６３は、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されることに応じて、スピーカ１１９を制御して、決定された程度の大きさで音を出力させる。このため、携帯情報装置２００でユーザーがタッチパネル２０７Ｂを指示すると、携帯情報装置２００によって所定の大きさの音を発生することによって操作を受け付けたことがユーザーに通知されるのに対して、ＭＦＰ１００に操作権限を切り換えて、タッチパネル１６５を指示すると、ユーザーに操作を受け付けたことが音によって聴覚的に通知される。また、ユーザーに通知する音の大きさは、ＭＦＰ１００が出力可能な音の大きさの範囲に対して、携帯情報装置２００における音の大きさが携帯情報装置２００で発生可能な音の大きさの範囲に対する割合と同じ割合の大きさなので、携帯情報装置２００における通知の程度と同じ程度の大きさの音で通知することができる。このため、携帯情報装置２００とＭＦＰ１００とのいずれを操作する場合であっても、操作を受け付けたことに応じて発する音の大きさの程度を同じにすることができる。
【０１２１】
＜携帯情報装置において画像を媒体とした通知方法がデフォルトの場合＞
この場合、携帯情報装置２００は、タッチパネル２０７Ｂがユーザーにより指示された位置を検出することに応じて、所定の画像を表示する。このため、通知情報取得部６５が携帯情報装置２００から取得する通知情報は、媒体の種類が「画像」、程度の範囲が画像の大きさの範囲、程度が画像の大きさである。
【０１２２】
（１）装置側通知部６３において、デフォルトで通知方法が定められていない場合。
【０１２３】
通知情報に含まれる媒体の種類と、デフォルトで定められた通知方法の媒体の種類とが異なる。また、装置側通知部６３は、通知情報に含まれる媒体の種類である「画像」による第２の通知方法で通知することが可能である。このため、装置側通知部６３は、第２の通知方法を決定する。装置側通知部６３は、通知情報に含まれる程度が通知情報に含まれる程度の範囲に対する割合を算出する。例えば、通知情報に含まれる程度の画像の大きさの通知情報に含まれる画像の大きさの範囲に対する割合を６０％とする。装置側通知部６３は、表示部１６１に表示する画像の大きさの範囲の６０％の大きさで画像を表示するように設定する。
【０１２４】
装置側通知部６３は、操作権限切換部５３から切換信号が入力されない場合は、装置側操作受付部５９から通知指示が入力されても操作を受け付けたことをユーザーに通知しない。装置側通知部６３は、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されることに応じて、表示部１６１の表示面中でタッチパネル１６５から入力される座標で特定される位置に、予め定められた画像を設定された大きさで、表示部１６１に表示されている画像に重畳して表示する。
【０１２５】
（２）装置側通知部６３において、デフォルトで第１の通知方法が定められている場合
通知情報に含まれる媒体の種類と、デフォルトで定められた第１の通知方法の媒体の種類とが異なる。また、装置側通知部６３は、通知情報に含まれる媒体の種類である「画像」による第２の通知方法で通知することが可能である。このため、装置側通知部６３は、第２の通知方法を決定する。装置側通知部６３は、通知情報に含まれる程度が通知情報に含まれる程度の範囲に対する割合を算出する。例えば、通知情報に含まれる程度の画像の大きさの通知情報に含まれる画像の大きさの範囲に対する割合を６０％とする。装置側通知部６３は、表示部１６１に表示する画像の大きさの範囲の６０％の大きさで画像を表示するように設定する。
【０１２６】
装置側通知部６３は、操作権限切換部５３から切換信号が入力されない場合は、装置側操作受付部５９から通知指示が入力されることに応じて、スピーカ１１９を制御してデフォルトで定められた音をデフォルトで定められた大きさで発生させる。装置側通知部６３は、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されることに応じて、表示部１６１の表示面中でタッチパネル１６５から入力される座標で特定される位置に、予め定められた画像を設定された大きさで、表示部１６１に表示されている画像に重畳して表示する。
【０１２７】
（３）装置側通知部６３において、デフォルトで第２の通知方法が定められている場合
通知情報に含まれる媒体の種類と、デフォルトで定められた第２の通知方法の媒体の種類とが同じである。このため、装置側通知部６３は、第２の通知方法を決定する。
【０１２８】
装置側通知部６３は、第２の通知方法を決定する場合、通知情報に含まれる程度が通知情報に含まれる程度の範囲に対する割合を算出する。例えば、通知情報に含まれる画像の大きさが、通知情報に含まれる画像の大きさの範囲に対する割合を６０％とする。装置側通知部６３は、表示部１６１に表示する画像の大きさの範囲の６０％の大きさで画像を表示するように設定する。
【０１２９】
装置側通知部６３は、操作権限切換部５３から切換信号が入力されない場合は、装置側操作受付部５９から通知指示が入力されることに応じて、表示部１６１の表示面中でタッチパネル１６５から入力される座標で特定される位置に、デフォルトで定められた画像を、デフォルトで定められた大きさで、表示部１６１に表示されている画像に重畳して表示する。装置側通知部６３は、操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されることに応じて、表示部１６１の表示面中でタッチパネル１６５から入力される座標で特定される位置に、予め定められた画像を設定された大きさで、表示部１６１に表示されている画像に重畳して表示する。
【０１３０】
このため、携帯情報装置２００でユーザーがタッチパネル２０７Ｂを指示すると、携帯情報装置２００によって所定の大きさの画像を操作画面の画像に重畳して表示することによって操作を受け付けたことがユーザーに通知されるのに対して、ＭＦＰ１００に操作権限を切り換えて、タッチパネル１６５を指示すると、ユーザーに操作を受け付けたことが画像を表示することによって視覚的に通知される。また、ユーザーに通知する画像の大きさは、ＭＦＰ１００が出力可能な画像の大きさの範囲に対して、携帯情報装置２００において表示される画像の大きさが携帯情報装置２００で表示可能な画像の大きさの範囲に対する割合と同じ割合の大きさなので、携帯情報装置２００における通知の程度に比例する程度の大きさの画像で通知することができる。
【０１３１】
図６は、第２の通知方法で通知する場合の操作画面の一例を示す第１の図である。図６を参照して、操作画面５００に、画像５０１が重畳して表示される。画像５０１は、ユーザーが指示した位置を中心に含む円形の画像である。画像５０１の直径は可変である。
【０１３２】
図７は、第２の通知方法で通知する場合の操作画面の一例を示す第２の図である。図７を参照して、操作画面５００に、画像５０３Ａ、５０３Ｂ。５０３Ｃが重畳して表示される。画像５０３Ａ、５０３Ｂ。５０３Ｃは、波紋を表す動画であり。画像５０３Ａが表示されてから所定の時間経過すると、画像５０３Ａに加えて画像５０３Ｂが表示され、さらに所定時間経過すると、画像５０３Ａ，５０３Ｂに加えて画像５０４Ｃが表示され、さらに所定時間経過すると、画像５０３Ａ、５０３Ｂ。５０３Ｃの表示が終了する。画像５０３Ａ、５０３Ｂ。５０３Ｃは、同心円であり、その中心がユーザーにより指示された位置である。画像のサイズは、画像５０３Ａ、５０３Ｂ、５０３Ｃのうち最も大きな画像５０３Ｃのサイズにより定まる。
【０１３３】
図８は、第１の実施の形態における遠隔操作処理の流れの一例を示すフローチャートである。遠隔操作処理は、携帯情報装置２００，２００Ａ，２００Ｂそれぞれが備えるＣＰＵ２０１が、フラッシュメモリ２０３、またはＣＤ−ＲＯＭ２１１Ａに記憶された遠隔操作プログラムを実行することにより、ＣＰＵ２０１により実行される処理である。ここでは、携帯情報装置２００が遠隔操作処理を実行する場合を例に説明する。
【０１３４】
図８を参照して、ＣＰＵ２０１は、遠隔操作指示を受け付けたか否かを判断する（ステップＳ５１）。操作部２０７がユーザーにより入力される遠隔操作指示を受け付けたならば遠隔操作指示を受け付ける。遠隔操作指示を受け付けるまで待機状態となり（ステップＳ５１でＮＯ）、遠隔操作指示を受け付けたならば（ステップＳ５１でＹＥＳ）、処理をステップＳ５２に進める。遠隔操作指示は、遠隔操作の対象となる遠隔制御装置を特定する指示を含む。ここでは、ＭＦＰ１００が遠隔操作の対象となる遠隔制御装置として特定される場合を例に説明する。
【０１３５】
ステップＳ５２においては、遠隔操作の対象であるＭＦＰ１００に接続要求を送信する。無線ＬＡＮＩ／Ｆ２０８を制御して、ＭＦＰ１００との間の通信経路を確立するために接続要求を送信する。そして、通信経路が確立したか否かを判断する（ステップＳ５３）。ＭＦＰ１００とネゴシエーションすることによって、通信経路を確立する。通信経路が確立するまでステップＳ５２を繰り返し（ステップＳ５３でＮＯ）、通信経路が確立したならば（ステップＳ５３でＹＥＳ）、処理をステップＳ５４に進める。
【０１３６】
ステップＳ５４においては、ステップＳ５３において通信経路を確立したＭＦＰ１００に通知情報を送信する。通知情報は、操作を受け付けたことをユーザーに通知するために、デフォルトで定められた媒体の種類、程度の範囲およびデフォルトで定められた程度を含む。
【０１３７】
ステップＳ５５においては、画像を受信したか否かを判断する。無線ＬＡＮＩ／Ｆ２０８が、ステップＳ５３において確立した通信経路を介してＭＦＰ１００から画像を受信したか否かを判断する。画像を受信したならば処理をステップＳ５６に進めるが、そうでなければ処理をステップＳ５７に進める。
【０１３８】
ステップＳ５６においては、受信された画像を表示部２０６に表示し、処理をステップＳ５７に進める。ステップＳ５７においては、画像中でユーザーにより指示された位置を検出したか否かを判断する。タッチパネル２０７Ｂが座標を出力したならば、画像中でユーザーにより指示された位置を検出する。画像中でユーザーにより指示された位置を検出したならば処理をステップＳ５８に進めるが、そうでなければ処理をステップＳ６０に進める。
【０１３９】
ステップＳ５８においては、タッチパネル２０７Ｂが出力する座標を遠隔制御装置であるＭＦＰ１００に送信し、処理をステップＳ５９に進める。具体的には、無線ＬＡＮＩ／Ｆ２０８を制御し、タッチパネル２０７Ｂが出力する座標を、ステップＳ５３において確立された通信経路を介してＭＦＰ１００に送信する。ステップＳ５９においては、デフォルトで定められた通知方法および程度で、操作を受け付けたことをユーザーに通知し、処理をステップＳ５５に戻す。振動を媒体とした通知方法が設定されている場合には、ＣＰＵ２０１は、バイブレータ２０９をデフォルトで定められた周波数で振動させ、音を媒体とした通知方法が設定されている場合には、ＣＰＵ２０１は、通話部２０５が備えるスピーカからデフォルトで定められた大きさの音を出力させ、画像を媒体とした通知方法が設定されている場合には、ＣＰＵ２０１は、表示部２０６に表示されている画像にデフォルトで定められた画像をデフォルトで定められた大きさで重畳表示させる。
【０１４０】
一方、ステップＳ６０においては、ステップＳ５３において確立された通信経路が切断されたか否かを判断する。通信経路が切断されたならば処理を終了するが、そうでなければ処理をステップＳ５５に戻す。
【０１４１】
図９および図１０は、第１の実施の形態における遠隔制御処理の流れの一例を示すフローチャートである。遠隔制御処理は、ＭＦＰ１００が備えるＣＰＵ１１１が、ＲＯＭ１１３、ＨＤＤ１１５、ＣＤ−ＲＯＭ１１８に記憶された遠隔制御プログラムを実行することにより、ＣＰＵ１１１により実行される処理である。図９および図１０を参照して、ＣＰＵ１１１は、接続要求を受信したか否かを判断する（ステップＳ０１）。通信Ｉ／Ｆ部１１２が携帯情報装置２００，２００Ａ，２００Ｂのいずれかから接続要求を受信したか否かを判断する。接続要求を受信するまで待機状態となり（ステップＳ０１でＮＯ）、接接続要求を受信したならば（ステップＳ０１でＹＥＳ）、処理をステップＳ０２に進める。ここでは、携帯情報装置２００から接続要求を受信する場合を例に説明する。
【０１４２】
ステップＳ０２においては、接続要求を送信してきた装置、ここでは携帯情報装置２００との間で通信経路を確立する。次のステップＳ０３においては、連携モードに設定し、処理をステップＳ０４に進める。ステップＳ０４においては、ステップＳ０２において通信経路を確立した携帯情報装置２００から通知情報を取得する。通知情報は、携帯情報装置２００が操作を受け付けたことを通知するための媒体の種類と、程度の範囲と、程度と、を含む。そして、取得された通知情報に基づいて、通知方法と程度とを決定する（ステップＳ０５）。通知情報に含まれる媒体の種類と、デフォルトで設定されている通知方法の媒体の種類とが同じならば、デフォルトで設定されている通知方法を決定する。通知情報に含まれる媒体の種類と、デフォルトで設定されている通知方法の媒体の種類とが異なる場合、通知情報に含まれる媒体の種類と同じ種類の媒体で通知可能であれば、通知情報に含まれる媒体の種類と同じ種類の媒体の通知方法を決定する。通知情報に含まれる媒体の種類と、デフォルトで設定されている通知方法の媒体の種類とが異なる場合、通知情報に含まれる媒体の種類と同じ種類の媒体で通知不可能であれば、デフォルトで設定されている通知方法を決定する。さらに、通知情報に含まれる程度が、通知情報に含まれる程度の範囲に対する割合を算出する。そして、決定された通知方法の媒体で通知可能な範囲に対して算出された割合の程度を決定する。
【０１４３】
次のステップＳ０６においては、操作権限を遠隔操作装置に設定し、処理をステップＳ０７に進める。ステップＳ０７においては、デフォルトの操作画面を決定し、処理をステップＳ０８に進める。デフォルトの操作画面は、予め定められた操作画面である。
【０１４４】
ステップＳ０８においては、表示部１６１に遠隔操作通知画面の画像を表示し、処理をステップＳ０９に進める。これにより、ユーザーは、表示部１６１に表示された遠隔操作通知画面の画像を見ることにより、操作権限が携帯情報装置２００にあることを知ることができる。携帯情報装置２００を操作してＭＦＰ１００を遠隔操作可能であることを知ることができ、ＭＦＰ１００の操作を望む場合には、後述する権限切換指示をＭＦＰ１００に入力する必要があることを知ることができる。
【０１４５】
次のステップＳ０９においては、ステップＳ０２において確立された通信経路を介して、携帯情報装置２００に操作画面の画像を送信し、処理をステップＳ１０に進める。ステップＳ１０においては、切換指示を受け付けたか否かを判断する。操作部１６３が備えるハードキー部１６７が有する複数のハードキーのうちで予め定められたハードキーが指示されると、切換指示を受け付ける。切換指示を受け付けたならば処理をステップＳ１１に進めるが、そうでなければ処理をステップＳ１６に進める。
【０１４６】
ステップＳ１１においては、操作権限が遠隔操作装置に設定されているか否かを判断する。操作権限が遠隔操作装置に設定されているならば処理をステップＳ１２に進めるが、そうでなければ処理をステップＳ１４に進める。ステップＳ１２においては、その時点でカレントに設定されている操作画面の画像を表示部１６１に表示し、処理をステップＳ１３に進める。ステップＳ１３においては、操作権限をタッチパネル１６５に設定し、処理をステップＳ１６に進める。これにより、ユーザーは、表示部１６１に表示された操作画面の画像を見ることにより、操作権限がＭＦＰ１００にあることを知ることができる。換言すれば、ＭＦＰ１００を操作することができることを知ることができ、携帯情報装置２００の操作を望む場合には、権限切換指示をＭＦＰ１００に入力する必要があることを知ることができる。
【０１４７】
一方、ステップＳ１４においては、操作権限を遠隔操作装置に設定し、処理をステップＳ１５に進める。ステップＳ１５においては、ステップＳ０８と同様に、遠隔操作通知画面を表示部１６１に表示し、処理をステップＳ１６に進める。
【０１４８】
ステップＳ１６においては、ユーザーによるタッチパネル１６５を指示する操作を検出したか否かを判断する。タッチパネル１６５がユーザーにより指示された位置の座標を出力する場合に、ユーザーの操作を検出する。ユーザーの操作を検出したならば処理をステップＳ１７に進めるが、そうでなければ処理をステップＳ１９に進める。ステップＳ１７においては、操作権限がタッチパネル１６５に設定されているか否かを判断する。操作権限がタッチパネル１６５に設定されているならば処理をステップＳ１８に進めるが、そうでなければ処理を、ステップＳ１０に戻す。
【０１４９】
ステップＳ１８においては、ステップＳ０５において決定された通知方法で、ステップＳ０５において決定された程度で通知し、処理をステップＳ２２に進める。
【０１５０】
一方、ステップＳ１９においては、通信Ｉ／Ｆ部１１２が、ステップＳ０２において確立された通信経路を介して携帯情報装置２００から座標を受信したか否かを判断する。携帯情報装置２００から座標を受信したならば処理をステップＳ２０に進めるが、そうでなければ処理をステップＳ１０に戻す。ステップＳ２０においては、操作権限が遠隔操作装置に設定されているか否かを判断する。操作権限が遠隔操作装置に設定されているならば処理をステップＳ２２に進めるが、そうでなければ処理をステップＳ２１に進める。ステップＳ２１においては、ステップＳ０２において確立された通信経路を介して携帯情報装置２００にエラーを返信し、処理をステップＳ１０に戻す。
【０１５１】
ステップＳ２２においては、ユーザーによる操作を決定する。処理がステップＳ１８から進む場合には、タッチパネル１６５が出力する座標に基づいて操作を決定し、処理がステップＳ２０から進む場合には、携帯情報装置２００から受信された座標に基づいて操作を決定する。
【０１５２】
次のステップＳ２３においては、決定された操作が別の画面に遷移する操作か否かを判断する。決定された操作が別の操作画面に遷移する操作ならば、処理をステップＳ２４に進めるが、そうでなければ処理をステップＳ２５に進める。ステップＳ２４においては、別の操作画面を決定し、処理をステップＳ０９に戻す。
【０１５３】
ステップＳ２５においては、決定された操作が処理の終了を指示する操作か否かを判断する。処理の終了を指示する操作ならば処理をステップＳ２６に進めるが、そうでなければ処理をステップＳ２７に進める。ステップＳ２６においては、ステップＳ０２において携帯情報装置２００との間で確立された通信経路を切断し、処理を終了する。
【０１５４】
ステップＳ２７においては、決定された操作が処理の実行を指示する実行指示操作か否かを判断する。実行指示操作ならば処理をステップＳ２８に進めるが、そうでなければ処理をステップＳ１０に戻す。ステップＳ２８においては、実行指示操作で特定される種類の処理を実行し、処理をステップＳ１０に戻す。
【０１５５】
以上説明したように、第１の実施の形態における遠隔制御システムにおいて、ＭＦＰ１００は、遠隔操作装置として機能する携帯情報装置２００により遠隔制御される画像処理装置として機能し、携帯情報装置２００と通信経路を確立した連携モードにおいて、携帯情報装置から受信される遠隔操作指令に従って処理を実行し、携帯情報装置２００が、ユーザーによる操作が受け付けられることに応じて、第１の媒体を用いてユーザーに通知する場合、連携モードでない場合は、ユーザーによる操作が受け付けられることに応じて第２の媒体を用いてユーザーに通知し、連携モードの場合は、第２の媒体が第１の媒体と異なる場合であって第１の媒体を用いてユーザーに通知可能な場合は、ユーザーによる操作が受け付けられることに応じて第１の媒体を用いてユーザーに通知する。このため、携帯情報装置２００でＭＦＰ１００を遠隔操作する場合と、ＭＦＰ１００を操作する場合とで同じ第１の媒体を用いて操作に対する応答が通知される。したがって、携帯情報装置２００によるＭＦＰ１００の遠隔操作に対する応答と、ＭＦＰ１００の操作に対する応答とを同じにすることができる。
【０１５６】
また、携帯情報装置２００は第１の媒体を用いてデフォルトで定められた程度で通知する場合、ＭＦＰ１００は、連携モードの場合は、携帯情報装置２００が第１の媒体を用いて通知することが可能な複数のレベルと同じ数のレベルに、第１の媒体を用いた通知の程度を分割し、分割された複数のレベルのうち携帯情報装置２００が第１の媒体を用いて通知するためにデフォルトで定められたレベルに対応するレベルを決定し、ユーザーによる操作が受け付けられることに応じて決定されたレベルで第１の媒体を用いてユーザーに通知する。このため、携帯情報装置でＭＦＰ１００を遠隔操作する場合と、ＭＦＰ１００を操作する場合とで第１の媒体を用いて通知する程度を同じにすることができる。
【０１５７】
また、ＭＦＰ１００は、連携モードの場合は、第２の媒体が第１の媒体と異なる場合であって第１の媒体を用いてユーザーに通知不可能な場合は、携帯情報装置２００が第１の媒体を用いて通知することが可能な複数のレベルと同じ数のレベルに、第２の媒体を用いた通知の程度を分割し、分割された複数のレベルのうち携帯情報装置２００が第１の媒体を用いて通知するためにデフォルトで定められたレベルに対応するレベルを決定し、ユーザーによる操作が受け付けられることに応じて決定されたレベルで第２の媒体を用いてユーザーに通知する。このため、携帯情報装置２００でＭＦＰ１００を遠隔操作する場合と、ＭＦＰ１００を操作する場合とで通知する媒体は異なるが同じ程度で通知することができる。
【０１５８】
第１の媒体および第２の媒体は、音、画像および振動のいずれかである。このため、携帯情報装置２００およびＭＦＰ１００それぞれは、音、画像および振動のいずれかで、操作を受け付けたことをユーザーに通知することができる。
【０１５９】
＜第２の実施の形態＞
第２の実施の形態における遠隔制御システム１の全体概要は、図１に示した全体概要と同じである。第２の実施の形態における遠隔制御システム１において、ＭＦＰ１００および携帯情報装置２００のハードウェア構成は、図２および図３にそれぞれ示したハードウェア構成と同じである。
【０１６０】
図１１は、第２の本実施の形態におけるＭＦＰが備えるＣＰＵの機能の一例を示すブロック図である。図１１に示す機能が図５に示した機能と異なる点は、装置側通知部６３および通知情報取得部６５が、装置側通知部６３Ａおよび通知情報送信部６５Ａにそれぞれ変更された点である。その他の機能は図５に示した機能と同じなので、ここでは説明を繰り返さない。
【０１６１】
図１０を参照して、装置側通知部６３Ａは、複数の通知方法で操作を受け付けたことをユーザーに通知することが可能である。具体的には、装置側通知部６３Ａは、第１の通知方法および第２の通知方法の２つの通知方法で操作を受け付けたことをユーザーに通知することが可能としている。第１の通知方法は、音を媒体とし、第２の通知方法は、画像を媒体とする。また、装置側通知部６３Ａは、通知の程度を異ならせることができ、通知することが可能な程度の範囲内で予め定められた程度で通知する。
【０１６２】
装置側通知部６３Ａは、操作権限切換部５３から切換信号が入力されない場合、または操作権限切換部５３からタッチパネル１６５に操作権限があることを示す切換信号が入力される場合は、装置側操作受付部５９から通知指示が入力されることに応じて、デフォルトで定められた通知方法および程度で、操作を受け付けたことをユーザーに通知する。装置側通知部６３Ａは、第１の通知方法がデフォルトで定められている場合、スピーカ１１９からデフォルトで定められた大きさの音を出力する。装置側通知部６３Ａは、第２の通知方法がデフォルトで定められている場合、表示部１６１に表示された操作画面の画像に重畳してデフォルトで定められた画像をデフォルトで定められたサイズで表示する。
【０１６３】
通知情報送信部６５Ａは、連携モード設定部５１から経路識別情報が入力される場合、通信Ｉ／Ｆ部１１２を制御して、経路識別情報で特定される通信経路を介して遠隔操作装置である携帯情報装置２００と通信し、携帯情報装置２００に通知情報を送信する。通知情報は、装置側通知部６３Ａが通知に用いるためにデフォルトで定められた媒体の種類と、程度の範囲およびデフォルトで定められた程度とを含む。通知情報送信部６５Ａは、第１の通知方法がデフォルトで定められている場合、媒体の種類を「音」とし、程度の範囲をスピーカ１１９が出力可能な音の大きさの範囲とし、程度を、スピーカ１１９から音を出力するためにデフォルトで定められた大きさとした通知情報を送信する。通知情報送信部６５Ａは、第２の通知方法がデフォルトで定められている場合、媒体の種類を「画像」とし、程度の範囲をデフォルトで定められた画像を表示するために定められたサイズの範囲とし、程度を、画像を表示するためにデフォルトで定められた大きさとした通知情報を送信する。
【０１６４】
図１２は、第２の実施の形態における携帯情報装置が備えるＣＰＵの機能の概要の一例を示すブロック図である。図１２を参照して、図４に示した機能と異なる点は、遠隔操作部２５１が通知情報送信部２６１を含まず、通知情報取得部２６１Ａを含む点、操作通知部２５７が操作通知部２５７Ａに変更された点である。その他の機能は、図４に示した機能と同じなので、ここでは説明を繰り返さない。
【０１６５】
通知情報取得部２６１Ａは、遠隔制御装置であるＭＦＰ１００との間の通信経路が確立すると、無線ＬＡＮＩ／Ｆ２０８を制御してＭＡＰ１００と通信し、ＭＦＰ１００から通知情報を取得する。通知情報取得部２６１Ａは、取得された通知情報を操作通知部２５７Ａに出力する。
【０１６６】
操作通知部２５７Ａは、遠隔側操作受付部２５５から通知指示が入力されることに応じて、操作を受け付けたことをユーザーに通知する。操作通知部２５７Ａは、複数の通知方法で操作を受け付けたことをユーザーに通知することが可能である。操作通知部２５７Ａは、振動を媒体とした通知方法、音を媒体とした通知方法および画像を媒体とした通知方法のいずれかで操作を受け付けたことをユーザーに通知することが可能としている。また、操作通知部２５７Ａは、通知の程度を異ならせることができる。操作通知部２５７Ａは、振動を媒体とした通知方法、音を媒体とした通知方法、画像を媒体とした通知方法のいずれかをデフォルトで定めている。また、操作通知部２５７Ａは、媒体に対して予め定められた程度の範囲のうちから通知のための程度をデフォルトで定めている。
【０１６７】
操作通知部２５７Ａは、通知情報取得部２６１Ａから入力される通知情報に基づいて、通知方法および程度を決定する。通知情報は、媒体の種類と、程度の範囲および程度とを含む。操作通知部２５７Ａは、通知情報に含まれる媒体の種類と、デフォルトで定められた通知方法の媒体の種類とを比較し、両者が同じであれば、デフォルトで定められた通知方法を決定する。操作通知部２５７Ａは、操作通知部２５７Ａは、デフォルトで定められた通知方法を決定する場合、通知情報に含まれる程度の範囲と程度とに基づいて、決定された通知方法で通知する程度を決定する。通知情報に含まれる程度が通知情報に含まれる程度の範囲に対する割合を算出し、決定された通知方法で通知する程度の範囲に対して、算出された割合と同じ割合となる程度を決定する。
【０１６８】
操作通知部２５７Ａは、通知情報に含まれる媒体の種類と、デフォルトで定められた通知方法の媒体の種類とが異なる場合、通知情報に含まれる媒体の種類の通知方法で通知可能であれば、通知情報に含まれる媒体の種類の通知方法に決定する。操作通知部２５７Ａは、通知情報に含まれる媒体の種類の通知方法に決定する場合、通知情報に含まれる程度の範囲と程度とに基づいて、決定された通知方法で通知する程度を決定する。
【０１６９】
操作通知部２５７Ａは、通知情報に含まれる媒体の種類と、デフォルトで定められた通知方法の媒体の種類とが異なる場合、通知情報に含まれる媒体の種類の通知方法で通知不可能ならば、通知可能な通知方法のいずれかに決定する。また、操作通知部２５７Ａは、通知情報に含まれる程度の範囲と程度とに基づいて、決定された通知方法で通知する程度を決定する。通知情報に含まれる程度が通知情報に含まれる程度の範囲に対する割合を算出し、決定された通知方法で通知する程度の範囲に対して、算出された割合と同じ割合となる程度を決定する。操作通知部２５７Ａは、遠隔側操作受付部２５５から通知指示が入力されることに応じて、決定された通知方法で定まる媒体を用いて、決定された程度で通知する。
【０１７０】
以下、操作通知部２５７Ａの動作について、遠隔制御装置であるＭＦＰ１００から取得されている通信情報を場合分けして説明する。
【０１７１】
＜ＭＦＰにおいて第１の通知方法がデフォルトの場合＞
この場合、ＭＦＰ１００は、タッチパネル１６５がユーザーにより指示された位置を検出することに応じて、予め定められた大きさの音をスピーカ１１９に出力させる。このため、通知情報取得部２６１ＡがＭＦＰ１００から取得する通知情報は、媒体の種類が「音」、程度の範囲が音の大きさ範囲、程度が音の大きさである。
【０１７２】
（１）操作通知部２５７Ａにおいて、デフォルトで通知方法が定められていない場合。
【０１７３】
通知情報に含まれる媒体の種類と、デフォルトで定められた通知方法の媒体の種類とが異なる。また、操作通知部２５７Ａは、通知情報に含まれる媒体の種類である「音」を媒体とした通知方法で通知することが可能である。このため、操作通知部２５７Ａは、音を媒体とした通知方法を決定する。
【０１７４】
（２）操作通知部２５７Ａにおいて、デフォルトで音を媒体とした通知方法が定められている場合
通知情報に含まれる媒体の種類と、デフォルトで定められた音を媒体にした通知方法の媒体の種類とが同じである。このため、装置側通知部６３は、音を媒体とした通知方法を決定する。
【０１７５】
（３）操作通知部２５７Ａにおいて、デフォルトで振動または画像を媒体とした通知方法が定められている場合
通知情報に含まれる媒体の種類と、デフォルトで定められた振動の通知方法の媒体の種類とが異なる。また、操作通知部２５７Ａは、通知情報に含まれる媒体の種類である「音」を媒体とした通知方法で通知することが可能である。このため、装置側通知部６３は、音を媒体とした通知方法を決定する。
【０１７６】
操作通知部２５７Ａは、音を媒体とした通知方法を決定する場合、通知情報に含まれる程度が通知情報に含まれる程度の範囲に対する割合を算出する。例えば、通知情報に含まれる音の大きさが、通知情報に含まれる音の大きさの範囲に対する割合を６０％とする。操作通知部２５７Ａは、通話部２０５が備えるスピーカで発生可能な音の大きさの範囲の６０％の大きさで音を発生するように設定する。
【０１７７】
操作通知部２５７Ａは、遠隔側操作受付部２５５から通知指示が入力されることに応じて、通話部２０５が備えるスピーカを制御して、決定された程度の音を出力させる。このため、ＭＦＰ１００に操作権限を切り換えて、タッチパネル１６５を指示すると、ユーザーに操作を受け付けたことが所定の大きさの音によって聴覚的に通知されるのに対して、携帯情報装置２００でユーザーがタッチパネル２０７Ｂを指示すると、携帯情報装置２００によって所定の大きさの音を発生することによって操作を受け付けたことがユーザーに通知される。また、ユーザーに通知する音の大きさは、携帯情報装置２００が出力可能な音の大きさの範囲に対して、ＭＦＰ１００における音の大きさがＭＦＰ１００で発生可能な音の大きさの範囲に対する割合と同じ割合の大きさなので、ＭＦＰ１００における通知の程度と同じ程度の大きさの音で通知することができる。このため、携帯情報装置２００とＭＦＰ１００とのいずれを操作する場合であっても、操作を受け付けたことに応じて発する音の大きさの程度を同じにすることができる。
【０１７８】
＜ＭＦＰにおいて第２の通知方法がデフォルトの場合＞
この場合、ＭＦＰ１００は、タッチパネル１６５がユーザーにより指示された位置を検出することに応じて、表示部１６１に表示された操作画面の画像に重畳してデフォルトで定められた画像をデフォルトで定められたサイズで表示する。このため、通知情報取得部２６１ＡがＭＦＰ１００から取得する通知情報は、媒体の種類が「画像」、程度の範囲が画像の大きさ範囲、程度が画像の大きさである。
【０１７９】
（１）操作通知部２５７Ａにおいて、デフォルトで通知方法が定められていない場合。
【０１８０】
通知情報に含まれる媒体の種類と、デフォルトで定められた通知方法の媒体の種類とが異なる。また、操作通知部２５７Ａは、通知情報に含まれる媒体の種類である「画像」を媒体とした通知方法で通知することが可能である。このため、操作通知部２５７Ａは、画像を媒体とした通知方法を決定する。
【０１８１】
（２）操作通知部２５７Ａにおいて、デフォルトで画像を媒体とした通知方法が定められている場合
通知情報に含まれる媒体の種類と、デフォルトで定められた画像を媒体にした通知方法の媒体の種類とが同じである。このため、装置側通知部６３は、画像を媒体とした通知方法を決定する。
【０１８２】
（３）操作通知部２５７Ａにおいて、デフォルトで音または振動を媒体とした通知方法が定められている場合
通知情報に含まれる媒体の種類と、デフォルトで定められた振動の通知方法の媒体の種類とが異なる。また、操作通知部２５７Ａは、通知情報に含まれる媒体の種類である「画像」を媒体とした通知方法で通知することが可能である。このため、装置側通知部６３は、画像を媒体とした通知方法を決定する。
【０１８３】
操作通知部２５７Ａは、画像を媒体とした通知方法を決定する場合、通知情報に含まれる程度が通知情報に含まれる程度の範囲に対する割合を算出する。例えば、通知情報に含まれる画像の大きさが、通知情報に含まれる画像の大きさの範囲に対する割合を６０％とする。操作通知部２５７Ａは、表示部２０６に表示する画像に対して定められた大きさの範囲の６０％の大きさに、予め定められた画像の大きさを設定する。
【０１８４】
操作通知部２５７Ａは、遠隔側操作受付部２５５から通知指示が入力されることに応じて、タッチパネル２０７Ｂがユーザーにより指示された位置を検出することに応じて、表示部２０６に表示された操作画面の画像に重畳してデフォルトで定められた画像を設定された大きさで表示する。
【０１８５】
このため、ＭＦＰ１００に操作権限を切り換えて、タッチパネル１６５を指示すると予め定められた画像が所定の大きさで表示されることにより、ユーザーによる操作を受け付けたことが視覚的に通知されるのに対して、携帯情報装置２００でユーザーがタッチパネル２０７Ｂを指示すると、携帯情報装置２００によって予め定められた画像を設定された大きさで表示部２０６に表示することによって操作を受け付けたことがユーザーに通知される。また、表示部２０６に表示される予め定められた画像の大きさは、携帯情報装置２００が出力可能な予め定められた画像の大きさの範囲に対して、ＭＦＰ１００における予め定められた画像の大きさがＭＦＰ１００で表示可能な画像の大きさの範囲に対する割合と同じ割合の大きさなので、ＭＦＰ１００における通知の程度と同じ程度の大きさで予め定められた画像を表示することができる。このため、携帯情報装置２００とＭＦＰ１００とのいずれを操作する場合であっても、操作を受け付けたことに応じて表示される画像の大きさの程度を同じにすることができる。
【０１８６】
図１３は、第２の実施の形態における遠隔操作処理の流れの一例を示すフローチャートである。図１３を参照して、図８に示した遠隔操作処理と異なる点は、ステップＳ５４に代えてステップＳ６１およびステップＳ６２が追加された点、ステップＳ５９がステップＳ５９Ａに変更された点である。その他の処理は、図８に示した処理と同じなので、ここでは説明を繰り返さない。
【０１８７】
ステップＳ６１においては、ステップＳ５３において通信経路を確立したＭＦＰ１００から通知情報を取得する。通知情報は、ＭＦＰ１００が操作を受け付けたことを通知するためにデフォルトで定められた媒体の種類と、程度の範囲と、デフォルトで定められた程度と、を含む。そして、取得された通知情報に基づいて、通知方法と程度とを決定し（ステップＳ６２）、処理をステップＳ５５に進める。通知情報に含まれる媒体の種類と、デフォルトで設定されている通知方法の媒体の種類とが同じならば、デフォルトで設定されている通知方法を決定する。通知情報に含まれる媒体の種類と、デフォルトで設定されている通知方法の媒体の種類とが異なる場合、通知情報に含まれる媒体の種類と同じ種類の媒体で通知可能であれば、通知情報に含まれる媒体の種類と同じ種類の媒体の通知方法を決定する。通知情報に含まれる媒体の種類と、デフォルトで設定されている通知方法の媒体の種類とが異なる場合、通知情報に含まれる媒体の種類と同じ種類の媒体で通知不可能であれば、デフォルトで設定されている通知方法を決定する。さらに、通知情報に含まれる程度が、通知情報に含まれる程度の範囲に対する割合を算出する。そして、決定された通知方法の媒体で通知可能な範囲に対して算出された割合の程度を決定する。
【０１８８】
ステップＳ５９Ａにおいては、ステップＳ６２において決定された通知方法で、ステップＳ６２において決定された程度で通知し、処理をステップＳ５５に戻す。
【０１８９】
図１４および図１５は、第２の実施の形態における遠隔制御処理の流れの一例を示すフローチャートである。図１４および図１５を参照して、図９および図１０に示した遠隔制御処理と異なる点は、ステップＳ０５が削除された点、ステップＳ０４およびステップＳ１８がステップＳ０４ＡおよびステップＳ１８Ａにそれぞれ変更された点である。その他の処理は、図９に示した処理と同じなので、ここでは説明を繰り返さない。
【０１９０】
ステップＳ０４Ａにおいては、ステップＳ０２において通信経路を確立した携帯情報装置２００に通知情報を送信し、処理をステップＳ０６に進める。
【０１９１】
ステップＳ１８Ａにおいては、デフォルトで定められた通信方法および程度で、操作を受け付けたことをユーザーに通知し、処理をステップＳ２２に進める。第１の通知方法がデフォルトに設定されている場合には、ＣＰＵ１１１は、スピーカ１１９から所定の大きさの音を出力させ、第２の通知方法がデフォルトに設定されている場合には、ＣＰＵ１１１は、表示部１６１に表示されている操作画面の画像に予め定められた画像を所定の大きさで重畳表示させる。
【０１９２】
以上説明したように、第２の実施の形態における遠隔制御システムにおいて、ＭＦＰ１００は、遠隔操作装置として機能する携帯情報装置２００により遠隔制御される画像処理装置として機能し、携帯情報装置２００と通信経路を確立した連携モードにおいて、携帯情報装置から受信される遠隔操作指令に従って処理を実行し、ＭＦＰ１００が、ユーザーによる操作が受け付けられることに応じて、第１の媒体を用いてユーザーに通知する場合、連携モードでない場合は、ユーザーによる操作が受け付けられることに応じて第２の媒体を用いてユーザーに通知し、連携モードの場合は、第２の媒体が第１の媒体と異なる場合であって第１の媒体を用いてユーザーに通知可能な場合は、ユーザーによる操作が受け付けられることに応じて第１の媒体を用いてユーザーに通知する。このため、携帯情報装置２００でＭＦＰ１００を遠隔操作する場合と、ＭＦＰ１００を操作する場合とで同じ第１の媒体を用いて操作に対する応答が通知される。したがって、携帯情報装置２００によるＭＦＰ１００の遠隔操作に対する応答と、ＭＦＰ１００の操作に対する応答とを同じにすることができる。
【０１９３】
また、ＭＦＰ１００は第１の媒体を用いてデフォルトで定められた程度で通知する場合、携帯情報装置２００は、連携モードの場合は、ＭＦＰ１００が第１の媒体を用いて通知することが可能な複数のレベルと同じ数のレベルに、第１の媒体を用いた通知の程度を分割し、分割された複数のレベルのうちＭＦＰ１００が第１の媒体を用いて通知するためにデフォルトで定められたレベルに対応するレベルを決定し、ユーザーによる操作が受け付けられることに応じて決定されたレベルで第１の媒体を用いてユーザーに通知する。このため、携帯情報装置でＭＦＰ１００を遠隔操作する場合と、ＭＦＰ１００を操作する場合とで第１の媒体を用いて通知する程度を同じにすることができる。
【０１９４】
また、携帯情報装置２００は、連携モードの場合は、第２の媒体が第１の媒体と異なる場合であって第１の媒体を用いてユーザーに通知不可能な場合は、ＭＦＰ１００が第１の媒体を用いて通知することが可能な複数のレベルと同じ数のレベルに、第２の媒体を用いた通知の程度を分割し、分割された複数のレベルのうちＭＦＰ１００が第１の媒体を用いて通知するためにデフォルトで定められたレベルに対応するレベルを決定し、ユーザーによる操作が受け付けられることに応じて決定されたレベルで第２の媒体を用いてユーザーに通知する。このため、携帯情報装置２００でＭＦＰ１００を遠隔操作する場合と、ＭＦＰ１００を操作する場合とで通知する媒体は異なるが同じ程度で通知することができる。
【０１９５】
第１の媒体および第２の媒体は、音、画像および振動のいずれかである。このため、携帯情報装置２００およびＭＦＰ１００それぞれは、音、画像および振動のいずれかで、操作を受け付けたことをユーザーに通知することができる。
【０１９６】
なお、上述した実施の形態においては、遠隔制御システム１について説明したが、図１０および図１１、または図１４および図１５に示した遠隔制御処理をＭＦＰ１００に実行させる遠隔制御方法、その遠隔制御方法をＭＦＰ１００を制御するＣＰＵ１１１に実行させる遠隔制御プログラムとして発明を捉えることができるのは言うまでもない。
【０１９７】
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
【０１９８】
＜付記＞
（１）  前記第１の媒体および前記第２の媒体は、音、画像および振動のいずれかである、請求項８〜１０のいずれかに記載の画像処理装置。
（２）  音を出力する装置側音発生手段と、
前記装置側表示手段に表示された画像に所定の画像を重畳表示する装置側重畳制御手段と、
振動を発生する装置側振動手段と、の少なくとも１つをさらに備えた、請求項８〜１１０のいずれかに記載の画像処理装置。
（３）  画像を表示する装置側表示手段と、
前記装置側表示手段の表示面中でユーザーにより指示された位置を検出する装置側位置検出手段と、をさらに備え、
前記装置側操作受付手段は、前記装置側表示手段に操作画面の画像が表示された状態で前記装置側位置検出手段により位置が検出されることに応じて、前記検出された位置に対応する前記操作画面中の位置に関連付けられた操作を決定し、
前記遠隔制御手段は、操作画面の画像を前記遠隔操作装置に装置した後に前記遠隔操作装置から受信される前記遠隔操作指令に含まれる位置情報で特定される位置に対応する前記送信された操作画面の画像中の位置に関連付けられた操作に対応する処理を前記処理実行手段に実行させる、請求項８〜１１のいずれかに記載の画像処理装置。
（４）  連携モードにおいて、前記遠隔操作装置および自装置のいずれかに操作権限を切り換える操作権限切換手段を、さらに備え、
前記装置側操作受付手段は、連携モードにおいて、自装置に操作権限が切り換えられている場合に操作を受け付ける、請求項８〜１１のいずれかに記載の画像処理装置。
【符号の説明】
【０１９９】
１  遠隔制御システム、３  ネットワーク、５  無線局、１００，１００Ａ，１００Ｂ  ＭＦＰ、２００，２００Ａ，２００Ｂ  携帯情報装置、１１０  メイン回路、１１１  ＣＰＵ、１１２  通信Ｉ／Ｆ部、１１３  ＲＯＭ、１１４  ＲＡＭ、１１５  ＨＤＤ、１１６  ファクシミリ部、１１７  外部記憶装置、１１８  ＣＤ−ＲＯＭ、１２０  自動原稿搬送装置、１３０  原稿読取部、１４０  画像形成部、１５０  給紙部、１５５  後処理部、１６０  操作パネル、１６１  表示部、１６３  操作部、１６５  タッチパネル、１６７  ハードキー部、２０１  ＣＰＵ、２０２  カメラ、２０３  フラッシュメモリ、２０４  無線通信部、２０５  通話部、２０６  表示部、２０７  操作部、２０７Ａ  メインキー、２０７Ｂ  タッチパネル、２０８  無線ＬＡＮＩ／Ｆ、２０９  バイブレータ、２１０  加速度センサー、２１１  外部記憶装置、５１  連携モード設定部、５３  操作権限切換部、５５  遠隔制御部、５７  装置側表示制御部、５９  装置側操作受付部、６１  処理実行部、６３，６３Ａ  装置側通知部、６５  通知情報取得部、６５Ａ  通知情報送信部、２５１  遠隔操作部、２５３  遠隔側表示制御部、２５５  遠隔側操作受付部、２５７，２５７Ａ  操作通知部、２６１，２６１Ａ  通知情報取得部。
【図１】
0006278017.tif 000002
【図２】
0006278017.tif 000003
【図３】
0006278017.tif 000004
【図４】
0006278017.tif 000005
【図５】
0006278017.tif 000006
【図６】
0006278017.tif 000007
【図７】
0006278017.tif 000008
【図８】
0006278017.tif 000009
【図９】
0006278017.tif 000010
【図１０】
0006278017.tif 000011
【図１１】
0006278017.tif 000012
【図１２】
0006278017.tif 000013
【図１３】
0006278017.tif 000014
【図１４】
0006278017.tif 000015
【図１５】
0006278017.tif 000016