(57)【要約】      （修正有）【課題】操作表示装置間の荷重基準の差異に起因する操作性の相違によるユーザーへの負担を軽減できる操作表示システム、操作表示装置及び操作表示プログラムを提供する。【解決手段】操作表示システム４００は、複数の取得部及び複数の制御部を有する。取得部は、タッチパネルが操作を受け付ける押圧力の基準となる荷重基準を取得する。制御部は、取得部によって取得された荷重基準を比較する。制御部は、複数の操作表示装置のうち、ユーザーが最後に操作した第１の操作表示装置と、次に操作しようとしている第２の操作表示装置とについて、荷重基準を比較した結果、差異がある場合、第２の操作表示装置のタッチパネルを押下する押圧力の変化の度合いを通知するように制御する。【選択図】図１
2016225762.tif 000002
【特許請求の範囲】
【請求項１】
タッチパネルを備える複数の操作表示装置を有する操作表示システムであって、
前記タッチパネルが操作を受け付ける押圧力の基準となる荷重基準を取得する取得部と、
前記取得部によって取得された荷重基準を比較する制御部と、を有し、
前記制御部は、
前記複数の操作表示装置のうち、ユーザーが最後に操作した第１の操作表示装置と、次に操作しようとしている第２の操作表示装置とについて、荷重基準を比較した結果、差異がある場合、前記第２の操作表示装置のタッチパネルを押下する押圧力の変化の度合いを通知するように制御する、操作表示システム。
【請求項２】
前記制御部は、
前記複数の操作表示装置のうちのいずれかの操作表示装置の画面に前記押圧力の変化の度合いを表示させることを特徴とする請求項１に記載の操作表示システム。
【請求項３】
前記制御部は、
前記第２の操作表示装置の画面に前記押圧力の変化の度合いを表示させることを特徴とする請求項２に記載の操作表示システム。
【請求項４】
ユーザーの視線方向を検出する視線検出部をさらに有し、
前記制御部は、
前記視線検出部の検出結果に基づいて、前記複数の操作表示装置のうち、ユーザーが現在見ている操作表示装置の画面に前記押圧力の変化の度合いを表示することを特徴とする請求項２に記載の操作表示システム。
【請求項５】
タッチパネルを備える複数の操作表示装置を有する操作表示システムであって、
前記タッチパネルが操作を受け付ける押圧力の基準となる荷重基準を取得する取得部と、
前記取得部によって取得された荷重基準を比較する制御部と、を有し、
前記制御部は、
第１の操作表示装置の画面と第２の操作表示装置の画面とに跨って、操作オブジェクトが表示されている場合、前記第１および第２の操作表示装置について荷重基準を比較した結果に応じて、前記操作オブジェクトを表示する表示制御を変更させるように制御する、操作表示システム。
【請求項６】
タッチパネルを備える複数の操作表示装置を有する操作表示システムであって、
前記タッチパネルが操作を受け付ける押圧力の基準となる荷重基準を取得する取得部と、
前記取得部によって取得された荷重基準を比較する制御部と、を有し、
前記制御部は、
第１の操作表示装置の画面と第２の操作表示装置の画面とに跨って、操作オブジェクトが表示されている状態で、各々の画面の当該操作オブジェクトがタッチされた場合、前記第１および第２の操作表示装置について荷重基準を比較した結果に応じて、前記タッチパネルの操作に関する情報を通知するように制御する、操作表示システム。
【請求項７】
前記制御部は、
前記荷重基準を比較した結果、前記第１および第２の操作表示装置のうち、荷重基準が低い方の操作表示装置の画面に前記操作オブジェクトの全体が見えるように当該操作オブジェクト移動して表示させるように制御することを特徴とする請求項５または６に記載の操作表示システム。
【請求項８】
前記制御部は、
前記荷重基準を比較した結果、差異がある場合、前記第１および第２の操作表示装置のタッチパネルを押下する押圧力の度合いを通知するように制御することを特徴とする請求項１〜７のいずれか１項に記載の操作表示システム。
【請求項９】
前記制御部は、
前記第１の操作表示装置または前記第２の操作表示装置に備えられていることを特徴とする請求項１〜８のいずれか１項に記載の操作表示システム。
【請求項１０】
前記第１の操作表示装置は、前記第２の操作表示装置と表示連携していることを特徴とする請求項１〜９のいずれか１項に記載の操作表示システム。
【請求項１１】
タッチパネルを備える操作表示装置であって、
前記タッチパネルが操作を受け付ける押圧力の基準となる第１の荷重基準と、ユーザーが最後に操作した操作表示装置のタッチパネルが操作を受け付ける押圧力の基準となる第２の荷重基準とを取得する取得部と、
前記第１の荷重基準と第２の荷重基準とを比較する制御部と、を有し、
前記制御部は、
前記ユーザーが自装置を次に操作しようとしていると判断され、かつ前記第１および第２の荷重基準の比較結果に差異がある場合、前記自装置のタッチパネルを押下する押圧力の変化の度合いを通知するように制御する、操作表示装置。
【請求項１２】
タッチパネルを備える操作表示装置であって、
前記タッチパネルが操作を受け付ける押圧力の基準となる第１の荷重基準と、他の操作表示装置のタッチパネルが操作を受け付ける押圧力の基準となる第２の荷重基準とを取得する取得部と、
前記第１の荷重基準と第２の荷重基準とを比較する制御部と、を有し、
前記制御部は、
自装置の画面と前記他の操作表示装置の画面とに跨って、操作オブジェクトが表示されている場合、前記第１および第２の荷重基準を比較した結果に応じて、前記操作オブジェクトを表示する表示制御を変更させる、操作表示装置。
【請求項１３】
タッチパネルを備える操作表示装置であって、
前記タッチパネルが操作を受け付ける押圧力の基準となる第１の荷重基準と、他の操作表示装置のタッチパネルが操作を受け付ける押圧力の基準となる第２の荷重基準とを取得する取得部と、
前記第１の荷重基準と第２の荷重基準とを比較する制御部と、を有し、
前記制御部は、
自装置の画面と前記他の操作表示装置の画面とに跨って、操作オブジェクトが表示されている状態で、各々の画面の当該操作オブジェクトがタッチされた場合、前記荷重基準を比較した結果に応じて、前記タッチパネルの操作に関する情報を通知するように制御する、操作表示装置。
【請求項１４】
タッチパネルを備える複数の操作表示装置を有する操作表示システムを制御する操作表示プログラムであって、
前記複数の操作表示装置のうち、ユーザーが最後に操作した第１の操作表示装置と、次に操作しようとしている第２の操作表示装置とについて、前記タッチパネルが操作を受け付ける押圧力の基準となる荷重基準を取得する手順と、
前記第１の操作表示装置の荷重基準と前記第２の操作表示装置の荷重基準とを比較する手順と、
前記第１および第２の操作表示装置の荷重基準を比較した結果、差異がある場合、前記第２の操作表示装置のタッチパネルを押下する押圧力の変化の度合いを通知する手順と、をコンピューターに実行させる、操作表示プログラム。
【請求項１５】
タッチパネルを備える複数の操作表示装置を有する操作表示システムを制御する操作表示プログラムであって、
前記複数の操作表示装置のうち、第１の操作表示装置および第２の操作表示装置について、前記タッチパネルが操作を受け付ける押圧力の基準となる荷重基準を取得する手順と、
前記第１の操作表示装置の荷重基準と前記第２の操作表示装置の荷重基準とを比較する手順と、
前記第１の操作表示装置の画面と前記第２の操作表示装置の画面とに跨って、操作オブジェクトが表示されている場合、前記第１および第２の操作表示装置について荷重基準を比較した結果に応じて、前記操作オブジェクトを表示する表示制御を変更させる手順と、をコンピューターに実行させる、操作表示プログラム。
【請求項１６】
タッチパネルを備える複数の操作表示装置を有する操作表示システムを制御する操作表示プログラムであって、
前記複数の操作表示装置のうち、第１の操作表示装置および第２の操作表示装置について、前記タッチパネルが操作を受け付ける押圧力の基準となる荷重基準を取得する手順と、
前記第１の操作表示装置の荷重基準と前記第２の操作表示装置の荷重基準とを比較する手順と、
前記第１の操作表示装置の画面と前記第２の操作表示装置の画面とに跨って、操作オブジェクトが表示されている状態で、各々の画面の当該操作オブジェクトがタッチされた場合、前記第１および第２の操作表示装置について荷重基準を比較した結果に応じて、前記タッチパネルの操作に関する情報を通知する手順と、をコンピューターに実行させる、操作表示プログラム。
【請求項１７】
タッチパネルを備える操作表示装置を制御する操作表示プログラムであって、
前記タッチパネルが操作を受け付ける押圧力の基準となる第１の荷重基準と、ユーザーが最後に操作した操作表示装置のタッチパネルが操作を受け付ける押圧力の基準となる第２の荷重基準とを取得する手順と、
前記第１の荷重基準と第２の荷重基準とを比較する手順と、
前記ユーザーが自装置を次に操作しようとしていると判断され、かつ前記第１および第２の荷重基準の比較結果に差異がある場合、前記自装置のタッチパネルを押下する押圧力の変化の度合いを通知する手順と、をコンピューターに実行させる、操作表示プログラム。
【請求項１８】
タッチパネルを備える操作表示装置を制御する操作表示プログラムであって、
前記タッチパネルが操作を受け付ける押圧力の基準となる第１の荷重基準と、他の操作表示装置のタッチパネルが操作を受け付ける押圧力の基準となる第２の荷重基準とを取得する手順と、
前記第１の荷重基準と第２の荷重基準とを比較する手順と、
自装置の画面と前記他の操作表示装置の画面とに跨って、操作オブジェクトが表示されている場合、前記第１の荷重基準と第２の荷重基準とを比較した結果に応じて、前記操作オブジェクトを表示する表示制御を変更させる手順と、をコンピューターに実行させる、操作表示プログラム。
【請求項１９】
タッチパネルを備える操作表示装置を制御する操作表示プログラムであって、
前記タッチパネルが操作を受け付ける押圧力の基準となる第１の荷重基準と、他の操作表示装置のタッチパネルが操作を受け付ける押圧力の基準となる第２の荷重基準とを取得する手順と、
前記第１の荷重基準と第２の荷重基準とを比較する手順と、
自装置の画面と前記他の操作表示装置の画面とに跨って、操作オブジェクトが表示されている状態で、各々の画面の当該操作オブジェクトがタッチされた場合、前記第１の荷重基準と第２の荷重基準とを比較した結果に応じて、前記タッチパネルの操作に関する情報を通知する手順と、をコンピューターに実行させる、操作表示プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、操作表示システム、操作表示装置および操作表示プログラムに関する。
【背景技術】
【０００２】
近年、タッチパネルを備える電子機器、たとえばスマートフォンなどの携帯電話端末やＭＦＰ（Ｍｕｌｔｉｆｕｎｃｔｉｏｎ  Ｐｅｒｉｐｈｅｒａｌ）が一般に普及している。タッチパネルは、通常、液晶ディスプレイなどの表示装置とタッチパッドなどの入力装置が一体化されて構成されている。たとえば、ユーザーがタッチパネルに情報を入力する場合、ユーザーは、タッチパネルの画面に表示されたアイコンやボタンなどの画像オブジェクトを、指やタッチペンを使用して触れることにより、上記アイコンやボタンなどを選択して情報を入力することができる。さらに、単に画面を指で触れるだけではなく、たとえば、画面に指で触れた状態で軽く弾く動作（フリック）や画面に指で触れた状態で滑らせる動作（スワイプ）などの動作を通じて、多様な入力操作を受け付けることができるタッチパネルも開発されてきている。
【０００３】
一方、電子機器の高機能化に伴い、タッチパネルに表示される情報の増大および多様化も進んできており、１つのタッチパネルだけでは、画面の大きさが限られ、必要な情報を一度にすべて表示できない場合が生じうる。このような場合、画面を縦または横方向にスクロールすることにより、見えない部分を見ることができるが、一度に見える画面の大きさは限られているので、逆に、これまで見えていた部が見えなくなってしまい不便を感じることがある。
【０００４】
これに対して、タッチパネルを備える複数の電子機器を連携させて、複数のタッチパネルによって１つの大きな画面を構成し、互いに関連する画像オブジェクトを複数のタッチパネルにわたって表示する技術（以下、「連携表示」と書く）が知られている。このような技術を使用すれば、複数のタッチパネルを使用して、より大きな画面に画像オブジェクトが表示されうる。また、連携表示している複数のタッチパネルにおいて、ユーザーは、１つのタッチパネルを操作するときと同様に、複数のタッチパネル間で操作をすることが可能となる（以下、「連携操作」と書く）。
【０００５】
ところが、現在市販されている電子機器のタッチパネルには、動作原理によりいくつかの方式が存在し、当該方式によってタッチパネルが操作を受け付ける押圧力の基準（以下、「荷重基準」と書く）が異なる場合がある。たとえば、タッチパネルの主要な方式として、抵抗膜式および静電容量式があり、抵抗膜式のタッチパネルは、静電容量式のタッチパネルと比べて荷重基準が高く、入力するには静電容量式のタッチパネルよりも強く押圧する必要がある。したがって、たとえばフリック操作やスワイプ操作をする場合において、ユーザーは、荷重基準が低いタッチパネルについては小さな押圧力で操作できるため操作しやすいと感じる一方で、荷重基準が高いタッチパネルについては操作しにくいと感じる可能性がある。
【０００６】
これに関連して、タッチパネルの操作性を改善するための技術として、たとえば下記特許文献１の技術が知られている。特許文献１には、隣接する画像オブジェクトに対して荷重基準を相違させることにより、タッチパネルの誤操作を抑制することを目的とした技術が開示されている。このような技術を使用すれば、タッチパネル個々の操作性を改善させることが期待できる。
【０００７】
しかしながら、特許文献１のような技術を使用して個々のタッチパネルの操作性が改善したとしても、複数の電子機器を連携させる場合において、各々のタッチパネルの操作性が相違しているとユーザーが操作しにくい。たとえば、荷重基準の異なるタッチパネルを備える複数の電子機器を連携させる場合では、荷重基準が高いタッチパネルの電子機器と荷重基準が低いタッチパネルの電子機器との間において操作性が異なる。その結果、ユーザーが意図したようにタッチパネルが動作しないため、ユーザーが負担に感じるおそれがある。
【０００８】
たとえば、荷重基準が異なる２つの操作表示装置において、荷重基準の低いタッチパネルでフリック操作を行った後、荷重基準の高いタッチパネルでフリック操作を行う場合、ユーザーはタッチパネルの操作性が急に低下したと感じる可能性がある。
【０００９】
また、荷重基準が異なる２つの操作表示装置間に跨って表示されている操作可能なオブジェクトを、ユーザーが親指や人差し指などを使用してマルチタッチ操作をする場合、各々の指に異なる押圧力を加える必要があるので、ユーザーが負担に感じるおそれがある。
【先行技術文献】
【特許文献】
【００１０】
【特許文献１】特開２０１１−１５０７３７号公報
【発明の概要】
【発明が解決しようとする課題】
【００１１】
本発明は、上記問題に鑑みてなされたものである。したがって、本発明の目的は、操作表示装置間の荷重基準の差異に起因する操作性の相違によるユーザーへの負担を軽減できる操作表示システム、操作表示装置および操作表示プログラムを提供することである。
【課題を解決するための手段】
【００１２】
本発明の上記目的は、下記によって達成される。
【００１３】
（１）タッチパネルを備える複数の操作表示装置を有する操作表示システムであって、前記タッチパネルが操作を受け付ける押圧力の基準となる荷重基準を取得する取得部と、前記取得部によって取得された荷重基準を比較する制御部と、を有し、前記制御部は、前記複数の操作表示装置のうち、ユーザーが最後に操作した第１の操作表示装置と、次に操作しようとしている第２の操作表示装置とについて、荷重基準を比較した結果、差異がある場合、前記第２の操作表示装置のタッチパネルを押下する押圧力の変化の度合いを通知するように制御する、操作表示システム。
【００１４】
（２）前記制御部は、前記複数の操作表示装置のうちのいずれかの操作表示装置の画面に前記押圧力の変化の度合いを表示させることを特徴とする上記（１）に記載の操作表示システム。
【００１５】
（３）前記制御部は、前記第２の操作表示装置の画面に前記押圧力の変化の度合いを表示させることを特徴とする上記（２）に記載の操作表示システム。
【００１６】
（４）ユーザーの視線方向を検出する視線検出部をさらに有し、前記制御部は、前記視線検出部の検出結果に基づいて、前記複数の操作表示装置のうち、ユーザーが現在見ている操作表示装置の画面に前記押圧力の変化の度合いを表示することを特徴とする上記（２）に記載の操作表示システム。
【００１７】
（５）タッチパネルを備える複数の操作表示装置を有する操作表示システムであって、前記タッチパネルが操作を受け付ける押圧力の基準となる荷重基準を取得する取得部と、前記取得部によって取得された荷重基準を比較する制御部と、を有し、前記制御部は、第１の操作表示装置の画面と第２の操作表示装置の画面とに跨って、操作オブジェクトが表示されている場合、前記第１および第２の操作表示装置について荷重基準を比較した結果に応じて、前記操作オブジェクトを表示する表示制御を変更させるように制御する、操作表示システム。
【００１８】
（６）タッチパネルを備える複数の操作表示装置を有する操作表示システムであって、前記タッチパネルが操作を受け付ける押圧力の基準となる荷重基準を取得する取得部と、前記取得部によって取得された荷重基準を比較する制御部と、を有し、前記制御部は、第１の操作表示装置の画面と第２の操作表示装置の画面とに跨って、操作オブジェクトが表示されている状態で、各々の画面の当該操作オブジェクトがタッチされた場合、前記第１および第２の操作表示装置について荷重基準を比較した結果に応じて、前記タッチパネルの操作に関する情報を通知するように制御する、操作表示システム。
【００１９】
（７）前記制御部は、前記荷重基準を比較した結果、前記第１および第２の操作表示装置のうち、荷重基準が低い方の操作表示装置の画面に前記操作オブジェクトの全体が見えるように当該操作オブジェクト移動して表示させるように制御することを特徴とする上記（５）または（６）に記載の操作表示システム。
【００２０】
（８）前記制御部は、前記荷重基準を比較した結果、差異がある場合、前記第１および第２の操作表示装置のタッチパネルを押下する押圧力の度合いを通知するように制御することを特徴とする上記（１）〜（７）のいずれか１つに記載の操作表示システム。
【００２１】
（９）前記制御部は、前記第１の操作表示装置または前記第２の操作表示装置に備えられていることを特徴とする上記（１）〜（８）のいずれか１つに記載の操作表示システム。
【００２２】
（１０）前記第１の操作表示装置は、前記第２の操作表示装置と表示連携していることを特徴とする上記（１）〜（９）のいずれか１つに記載の操作表示システム。
【００２３】
（１１）タッチパネルを備える操作表示装置であって、前記タッチパネルが操作を受け付ける押圧力の基準となる第１の荷重基準と、ユーザーが最後に操作した操作表示装置のタッチパネルが操作を受け付ける押圧力の基準となる第２の荷重基準とを取得する取得部と、前記第１の荷重基準と第２の荷重基準とを比較する制御部と、を有し、前記制御部は、前記ユーザーが自装置を次に操作しようとしていると判断され、かつ前記第１および第２の荷重基準の比較結果に差異がある場合、前記自装置のタッチパネルを押下する押圧力の変化の度合いを通知するように制御する、操作表示装置。
【００２４】
（１２）タッチパネルを備える操作表示装置であって、前記タッチパネルが操作を受け付ける押圧力の基準となる第１の荷重基準と、他の操作表示装置のタッチパネルが操作を受け付ける押圧力の基準となる第２の荷重基準とを取得する取得部と、前記第１の荷重基準と第２の荷重基準とを比較する制御部と、を有し、前記制御部は、自装置の画面と前記他の操作表示装置の画面とに跨って、操作オブジェクトが表示されている場合、前記第１および第２の荷重基準を比較した結果に応じて、前記操作オブジェクトを表示する表示制御を変更させる、操作表示装置。
【００２５】
（１３）タッチパネルを備える操作表示装置であって、前記タッチパネルが操作を受け付ける押圧力の基準となる第１の荷重基準と、他の操作表示装置のタッチパネルが操作を受け付ける押圧力の基準となる第２の荷重基準とを取得する取得部と、前記第１の荷重基準と第２の荷重基準とを比較する制御部と、を有し、前記制御部は、自装置の画面と前記他の操作表示装置の画面とに跨って、操作オブジェクトが表示されている状態で、各々の画面の当該操作オブジェクトがタッチされた場合、前記荷重基準を比較した結果に応じて、前記タッチパネルの操作に関する情報を通知するように制御する、操作表示装置。
【００２６】
（１４）タッチパネルを備える複数の操作表示装置を有する操作表示システムを制御する操作表示プログラムであって、前記複数の操作表示装置のうち、ユーザーが最後に操作した第１の操作表示装置と、次に操作しようとしている第２の操作表示装置とについて、前記タッチパネルが操作を受け付ける押圧力の基準となる荷重基準を取得する手順と、前記第１の操作表示装置の荷重基準と前記第２の操作表示装置の荷重基準とを比較する手順と、前記第１および第２の操作表示装置の荷重基準を比較した結果、差異がある場合、前記第２の操作表示装置のタッチパネルを押下する押圧力の変化の度合いを通知する手順と、をコンピューターに実行させる、操作表示プログラム。
【００２７】
（１５）タッチパネルを備える複数の操作表示装置を有する操作表示システムを制御する操作表示プログラムであって、前記複数の操作表示装置のうち、第１の操作表示装置および第２の操作表示装置について、前記タッチパネルが操作を受け付ける押圧力の基準となる荷重基準を取得する手順と、前記第１の操作表示装置の荷重基準と前記第２の操作表示装置の荷重基準とを比較する手順と、前記第１の操作表示装置の画面と前記第２の操作表示装置の画面とに跨って、操作オブジェクトが表示されている場合、前記第１および第２の操作表示装置について荷重基準を比較した結果に応じて、前記操作オブジェクトを表示する表示制御を変更させる手順と、をコンピューターに実行させる、操作表示プログラム。
【００２８】
（１６）タッチパネルを備える複数の操作表示装置を有する操作表示システムを制御する操作表示プログラムであって、前記複数の操作表示装置のうち、第１の操作表示装置および第２の操作表示装置について、前記タッチパネルが操作を受け付ける押圧力の基準となる荷重基準を取得する手順と、前記第１の操作表示装置の荷重基準と前記第２の操作表示装置の荷重基準とを比較する手順と、前記第１の操作表示装置の画面と前記第２の操作表示装置の画面とに跨って、操作オブジェクトが表示されている状態で、各々の画面の当該操作オブジェクトがタッチされた場合、前記第１および第２の操作表示装置について荷重基準を比較した結果に応じて、前記タッチパネルの操作に関する情報を通知する手順と、をコンピューターに実行させる、操作表示プログラム。
【００２９】
（１７）タッチパネルを備える操作表示装置を制御する操作表示プログラムであって、前記タッチパネルが操作を受け付ける押圧力の基準となる第１の荷重基準と、ユーザーが最後に操作した操作表示装置のタッチパネルが操作を受け付ける押圧力の基準となる第２の荷重基準とを取得する手順と、前記第１の荷重基準と第２の荷重基準とを比較する手順と、前記ユーザーが自装置を次に操作しようとしていると判断され、かつ前記第１および第２の荷重基準の比較結果に差異がある場合、前記自装置のタッチパネルを押下する押圧力の変化の度合いを通知する手順と、をコンピューターに実行させる、操作表示プログラム。
【００３０】
（１８）タッチパネルを備える操作表示装置を制御する操作表示プログラムであって、前記タッチパネルが操作を受け付ける押圧力の基準となる第１の荷重基準と、他の操作表示装置のタッチパネルが操作を受け付ける押圧力の基準となる第２の荷重基準とを取得する手順と、前記第１の荷重基準と第２の荷重基準とを比較する手順と、自装置の画面と前記他の操作表示装置の画面とに跨って、操作オブジェクトが表示されている場合、前記第１の荷重基準と第２の荷重基準とを比較した結果に応じて、前記操作オブジェクトを表示する表示制御を変更させる手順と、をコンピューターに実行させる、操作表示プログラム。
【００３１】
（１９）タッチパネルを備える操作表示装置を制御する操作表示プログラムであって、
前記タッチパネルが操作を受け付ける押圧力の基準となる第１の荷重基準と、他の操作表示装置のタッチパネルが操作を受け付ける押圧力の基準となる第２の荷重基準とを取得する手順と、前記第１の荷重基準と第２の荷重基準とを比較する手順と、自装置の画面と前記他の操作表示装置の画面とに跨って、操作オブジェクトが表示されている状態で、各々の画面の当該操作オブジェクトがタッチされた場合、前記第１の荷重基準と第２の荷重基準とを比較した結果に応じて、前記タッチパネルの操作に関する情報を通知する手順と、をコンピューターに実行させる、操作表示プログラム。
【発明の効果】
【００３２】
本発明によれば、ユーザーが最後に操作した第１の操作表示装置と、次に操作しようとしている第２の操作表示装置とについて、荷重基準を比較した結果、差異がある場合、上記第２の操作表示装置のタッチパネルを押下する押圧力の変化の度合いを通知する。したがって、第１の操作表示装置と第２の操作表示装置との間において荷重基準に差異があることがユーザーに認識されるので、第１の操作表示装置と第２の操作表示装置との間の荷重基準の差異に起因する操作性の相違によるユーザーへの負担を軽減できる。
【００３３】
また、荷重基準が異なる操作表示装置間に操作オブジェクトが跨って表示されている場合、荷重基準の低い装置の画面内に収まるように当該操作オブジェクトを移動させるので、ピンチインやピンチアウトなどのマルチタッチ操作を行いやすくなる。
【００３４】
さらに、タッチパネルの操作に関する情報が通知されるので、操作表示装置間の荷重基準の差異に起因する操作性の相違によるユーザーへの負担を軽減できる。
【図面の簡単な説明】
【００３５】
【図１】本発明の第１の実施形態の操作表示システムの構成を説明するための概略図である。
【図２】図１に示す画像形成装置の概略構成を説明するための側面図である。
【図３】図１に示す画像形成装置の概略構成を説明するためのブロック図である。
【図４】図１に示す携帯端末の概略構成を説明するためのブロック図である。
【図５】本発明の第１の実施形態の操作表示システムにおける操作表示装置の連携について説明するための模式図である。
【図６Ａ】本発明の第１の実施形態の操作表示方法の処理手順の一例を説明するためのフローチャートである。
【図６Ｂ】図６Ａに後続するフローチャートである。
【図６Ｃ】図６Ａの押圧情報を表示する処理（ステップＳ１０７）を説明するためのサブルーチンフローチャートである。
【図６Ｄ】図６Ｂの押圧情報を表示する処理（ステップＳ１１０）を説明するためのサブルーチンフローチャートである。
【図７】本発明の第１の実施形態において、荷重基準が低い装置から荷重基準が高い装置への操作対象の切り替えについて例示するための模式図である。
【図８】本発明の第１の実施形態において、荷重基準が高い装置から荷重基準が低い装置への操作対象の切り替えについて例示するための模式図である。
【図９Ａ】本発明の第１の実施形態において、押圧力の変化の度合いを視覚的に表現する一例を示す模式図である。
【図９Ｂ】本発明の第１の実施形態において、押圧力の変化の度合いを視覚的に表現する他の例を示す模式図である。
【図１０Ａ】本発明の第２の実施形態における操作表示方法の処理手順の一例を説明するためのフローチャートである。
【図１０Ｂ】図１０Ａの操作オブジェクトの位置を調整する処理（ステップＳ４０７）を説明するためのサブルーチンフローチャートである。
【図１０Ｃ】図１０Ａの押圧情報を通知する処理（ステップＳ４０８）を説明するためのサブルーチンフローチャートである。
【図１１】本発明の第２の実施形態において、操作オブジェクトの位置調整について説明するための模式図である。
【図１２】本発明の第２の実施形態において、押圧情報の通知について説明するための模式図である。
【図１３Ａ】本発明の第３の実施形態における操作表示方法の処理手順の一例を説明するためのフローチャートである。
【図１３Ｂ】図１３Ａの押圧情報を通知する処理（ステップＳ７０８）を説明するためのサブルーチンフローチャートである。
【図１４】本発明の第３の実施形態において、押圧情報の通知について説明するための模式図である。
【発明を実施するための形態】
【００３６】
以下、添付した図面を参照して本発明の操作表示システム、操作表示装置および操作表示プログラムの実施形態を説明する。なお、図中、同一の部材には同一の符号を用いた。
【００３７】
（第１の実施形態）
＜操作表示システムの構成＞
図１は、本発明の第１の実施形態の操作表示システムの構成を説明するための概略図である。また、図２および図３は、それぞれ、図１に示す画像形成装置の概略構成を説明するための側面図およびブロック図である。
【００３８】
図１に示すように、操作表示システム４００は、画像形成装置１００、携帯端末装置２００Ａ，２００Ｂ，２００Ｃ、およびサーバー３００を有する。これらの構成要素は、アクセスポイントに対して接続されており、ネットワークＮを通じて相互に通信可能に構成されている。なお、アクセスポイントおよびネットワークを使用せずに、上記構成要素同士が直接的に接続されていてもよい。また、上記構成要素は、無線よって互いに接続されていてもよいし、有線よって互いに接続されていてもよい。
【００３９】
本実施形態の画像形成装置１００は、たとえば、ＭＦＰ、プリンター、ファクシミリなどでありうる。以下では、画像形成装置１００がＭＦＰである場合を例示して説明する。また、携帯端末装置２００Ａ，２００Ｂ，２００Ｃは、たとえばスマートフォンなどの携帯電話端末、ＰＤＡ（Ｐｅｒｓｏｎａｌ  Ｄｉｇｉｔａｌ  Ａｓｓｉｓｔａｎｔｓ）などの携帯情報端末でありうる。以下、本明細書では説明の便宜のため、携帯端末装置を「携帯端末」と書く。
【００４０】
なお、図１には、ネットワークＮにＭＦＰが１台、携帯端末が３台、サーバーが１台接続されている場合を例示しているが、ＭＦＰ、携帯端末およびサーバーの台数はこの場合に限定されない。また、上記構成要素のいずれかが省略されたり、他の構成要素が追加されたりすることもある。
【００４１】
また、ネットワークＮは、イーサネット（登録商標）、トークンリング、およびＦＤＤＩ（Ｆｉｂｅｒ−Ｄｉｓｔｒｉｂｕｔｅｄ  Ｄａｔａ  Ｉｎｔｅｒｆａｃｅ）などの規格によりコンピューターやネットワーク機器同士を接続する構内情報通信網（ＬＡＮ：Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）や、ＬＡＮ同士を専用線で接続した広域情報通信網（ＷＡＮ：Ｗｉｄｅ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）や、インターネットや、これらの組み合わせなどの各種のネットワークからなる。ネットワークプロトコルは、たとえば、ＴＣＰ／ＩＰ（Ｔｒａｎｓｍｉｓｓｉｏｎ  Ｃｏｎｔｒｏｌ  Ｐｒｏｔｏｃｏｌ／Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）である。
【００４２】
＜ＭＦＰの構成＞
図２および図３に示すように、ＭＦＰ１００は、画像読取部１１０、画像処理部１２０、画像形成部１３０、通信部１４０、給紙部１５０、操作表示部１６０、撮像部１７０および制御部１８０を有する。これらの構成要素は、内部接続線１９０により接続されている。本実施形態では、ＭＦＰ１００は、操作表示装置として機能する。
【００４３】
画像読取部１１０は、原稿を光学的に読取り、画像データ信号を生成する。画像読取部１１０は、光源、光学系、イメージセンサー、およびアナログ・ディジタル変換回路を有する。画像読取部１１０において、光源は、（Ｒ，Ｇ，Ｂ）各色の光を原稿に順次照射する。光学系は、複数のミラーおよび結像レンズを有しており、原稿からの反射光は光学系のミラーおよび結像レンズを通じてイメージセンサーに結像される。イメージセンサーは、（Ｒ，Ｇ，Ｂ）各色に対応する反射光をラインごとに読取り、原稿からの反射光強度に応じて電気信号を生成する。生成された電気信号は、アナログ・ディジタル変換回路において、アナログ信号からディジタル信号に変換され、画像データ信号として、画像処理部１２０に送信される。
【００４４】
画像処理部１２０は、上記画像データ信号に各種の画像処理を施し、印刷画像データを生成する。当該画像処理としては、たとえば、シェーディング補正、γ補正、ライン間補正、色ずれ補正、拡大・縮小処理、色変換処理などが挙げられる。
【００４５】
画像形成部１３０は、印刷画像データに基づいて、電子写真プロセスにより画像を形成し、形成された画像を記録媒体としての用紙に定着する。より具体的には、画像形成部１３０は、帯電器により感光体を帯電させ、印刷画像データに基づいて、レーザー、ＬＥＤ（Ｌｉｇｈｔ  Ｅｍｉｔｔｉｎｇ  Ｄｉｏｄｅ）などの発光素子を使用して上記感光体に光を当てて静電潜像を形成する。印刷画像データは、画像処理部１２０で生成されるか、あるいは通信部１４０で受信された印刷ジョブをラスタライズして生成される。そして、画像形成部１３０は、上記感光体上の静電潜像にトナーを付着させたのち用紙に転写する。用紙は、給紙部１５０によって給紙され、用紙搬送部によって画像形成部１３０に搬送される。転写された用紙は、搬送ベルトで定着器に搬送され、用紙に転写されたトナーを加熱および加圧することにより溶着する。トナーが溶着されて画像が形成された用紙は、排紙トレイから外部に排出される。
【００４６】
通信部１４０は、ネットワークを介して、たとえば携帯端末２００Ａ，２００Ｂ，２００Ｃ、サーバー３００などの他の装置と通信するためのインターフェースである。通信には、ＬＴＥ（Ｌｏｎｇ  Ｔｅｒｍ  Ｅｖｏｌｕｔｉｏｎ）、Ｗ−ＣＤＭＡ（Ｗｉｄｅｂａｎｄ  Ｃｏｄｅ  Ｄｉｖｉｓｉｏｎ  Ｍｕｌｔｉｐｌｅ  Ａｃｃｅｓｓ）、イーサネット（登録商標）、Ｗｉ−Ｆｉ、ＦＤＤＩ、トークンリングなどの規格が用いられる。また、通信部１４０は、たとえばＢｌｕｅｔｏｏｔｈ（登録商標）などによる近距離無線通信機能を備え、携帯端末２００Ａ，２００Ｂ，２００Ｃと画像データなどの送受信を実行可能である。通信部１４０は、制御部１８０とともに取得部として機能する。
【００４７】
給紙部１５０は、少なくとも１つの給紙トレイを備え、画像形成部１３０に用紙を一枚ずつ供給する。
【００４８】
操作表示部１６０は、ユーザーからの各種入力を受け付けるとともに、各種設定、処理結果、警告、メッセージなどの情報を表示する。操作表示部１６０は、タッチパッドおよび表示装置を含むタッチパネルを備え、入力の受付と情報の表示とを並行して処理できる構造を有する。タッチパネルは、抵抗膜式、静電容量式、表面弾性波式、赤外線式、電磁誘導式、および荷重検出式などのいずれかの方式を採用しうる。以下では、操作表示部１６０が抵抗膜式のタッチパネルを備える場合を例示して説明する。また、表示装置は、タッチパッドの背面に配置され、液晶ディスプレイ、有機発光ディスプレイなどを備えうる。
【００４９】
ユーザーは、操作表示部１６０に情報を入力する場合、操作表示部１６０の画面に表示されたオブジェクトを、指やタッチペンを使用して触れることにより、上記オブジェクトを選択して情報を入力できる。なお、本明細書では、タッチパネルによって入力として受け付けられる押圧力でユーザーがタッチパネルに触れることを「タッチする」と称する。また、オブジェクトは、たとえばアイコン、ボタン、アイコンやボタンの背景に描かれる背景画像を含みうる。また、本明細書では、入力操作を受け付けることができるオブジェクトを「操作オブジェクト」と書く。
【００５０】
また、ユーザーは、画面を単に指でタッチして情報を入力する操作だけではなく、画面に指でタッチした状態で移動させるなど、多様な指の動作（ジェスチャー）を使用して操作表示部１６０に情報を入力することができる。本実施形態の操作表示部１６０は、入力操作として、とくに限定されないが、たとえばタップ、ダブルタップ、トリプルタップ、ロングタップ、ドラッグ、フリック、スワイプ、ピンチイン、ピンチアウトなどを受け付けることができる。以下、本明細書では、説明の便宜のため、上記入力操作のうちタップ、ダブルタップ、トリプルタップおよびロングタップ以外の操作、たとえばドラッグ、フリック、スワイプ、ピンチイン、ピンチアウトなどを「タッチ操作」と書く。とくに、ピンチイン、ピンチアウトなどタッチパネルの複数の箇所を同時にタッチする操作を「マルチタッチ操作」と書く。タッチ操作およびマルチタッチ操作は、概して、タップ、ダブルタップ、トリプルタップ、ロングタップと比較してより複雑な指の動作を伴う入力操作である。
【００５１】
撮像部１７０は、操作表示部１６０のタッチパネル上の物体を撮像する。本実施形態では、撮像部１７０は、カメラを備え、視線検出部として機能する。本実施形態では、撮像部１７０は、ユーザーの視線方向を検出するため、ユーザーの眼を撮像する。撮像部１７０によって撮像されたデータは、制御部１８０に送信される。
【００５２】
制御部１８０は、画像読取部１１０、画像処理部１２０、画像形成部１３０、通信部１４０、給紙部１５０、操作表示部１６０および撮像部１７０を制御する。
【００５３】
図３に示すように、制御部１８０は、補助記憶装置１８１、メモリー１８２およびＣＰＵ１８３を有する。
【００５４】
補助記憶装置１８１は、たとえばハードディスクドライブ、ソリッドステートドライブなどの大容量の記憶装置である。補助記憶装置１８１には、オペレーティングシステム、操作表示プログラムＰなど各種ソフトウェアプログラムが格納されている。操作表示プログラムＰは、後述するように、本実施形態の操作表示方法を実現するためのソフトウェアプログラムである。操作表示プログラムＰは、予め補助記憶装置１８１にインストールされていてもよいし、あるいは必要に応じてサーバー３００からダウンロードされてもよい。
【００５５】
メモリー１８２は、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、フラッシュＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）などのメモリデバイスを備える。上記各種ソフトウェアプログラムは、ＣＰＵ１８３によって実行される際に上記ＲＡＭに一時的に記憶される。また、上記ＲＡＭには、ＣＰＵ１８３による判断結果や演算結果が記憶される。また、上記フラッシュＲＯＭには、操作表示部１６０のタッチパネルの荷重基準、オブジェクトの操作種別、操作対象表示モード、視線モード、通知モード、自動シフトモードなど各種設定などが記憶される。
【００５６】
荷重基準は、タッチパネルが操作を受け付けるか否か決定する押圧力の基準であり、この基準以上の押圧力でタッチパネルが押された場合、入力を受け付ける一方で、この基準よりも小さい押圧力でタッチパネルが押された場合、入力を受け付けない。本実施形態の荷重基準は、異なる方式のタッチパネル間において同じ条件で比較できるように正規化されていることが好ましい。
【００５７】
オブジェクトの操作種別は、操作表示部１６０に表示する各オブジェクトについてのタッチパネルの操作に関する種別である。オブジェクトの操作種別には、たとえばタップ操作、フリック操作などがある。オブジェクトの操作種別にフリック操作が含まれている場合は、当該オブジェクトがフリック操作可能であることを示す。
【００５８】
操作対象表示モード、視線モード、通知モード、自動シフトモードは、管理者メニューを通じて設定されうる。これらのモードの詳細については後述する。
【００５９】
本実施形態では、制御部１８０は、ＭＦＰ１００と、当該ＭＦＰ１００と連携表示している携帯端末とについて、タッチパネルの荷重基準を取得し、両者を比較する。制御部１８０は、荷重基準の判断結果に応じて、ユーザーが最後に操作した第１の操作表示装置に対する押圧力から次に操作しようとしている第２の操作表示装置に対する押圧力への変化の度合い（たとえば「強め」または「弱め」）を表示するように制御する。
【００６０】
＜携帯端末の構成＞
次に、図４を参照して、携帯端末２００Ａ，２００Ｂ，２００Ｃの構成の概略について説明する。図４は、図１に示す携帯端末の概略構成を説明するためのブロック図である。なお、携帯端末２００Ａ，２００Ｂ，２００Ｃの構成は同一であるので、以下では、説明の重複を避けるため、携帯端末２００Ａの構成について説明し、携帯端末２００Ｂ，２００Ｃの構成については説明を省略する。
【００６１】
携帯端末２００Ａは、通信部２１０、操作表示部２２０、撮像部２３０および制御部２４０を有する。本実施形態では、携帯端末２００Ａは、操作表示装置として機能する。
【００６２】
通信部２１０は、ネットワークＮを介して、たとえばＭＦＰ１００、サーバー３００などの他の装置と通信するためのインターフェースである。通信には、ＬＴＥ、Ｗ−ＣＤＭＡ、イーサネット（登録商標）、Ｗｉ−Ｆｉ、ＦＤＤＩ、トークンリングなどの規格が用いられる。また、通信部２１０は、たとえばＢｌｕｅｔｏｏｔｈ（登録商標）などによる近距離無線通信機能を備え、ＭＦＰ１００と画像データなどの送受信を実行可能である。
通信部２１０は、制御部２４０とともに取得部として機能する。
【００６３】
操作表示部２２０は、ユーザーからの各種入力を受け付けるとともに、各種設定、処理結果、警告、メッセージなどの情報を表示する。操作表示部２２０は、タッチパッドおよび表示装置を含むタッチパネルを備え、入力の受付と情報の表示とを並行して処理できる構造を有する。タッチパネルは、抵抗膜式、静電容量式、表面弾性波式、赤外線式、電磁誘導式、および荷重検出式などのいずれかの方式を採用しうる。以下では、携帯端末２００Ａが静電容量式のタッチパネルを備える場合を例示して説明する。また、表示装置は、タッチパッドの背面に配置され、液晶ディスプレイ、有機発光ディスプレイなどを備えうる。
【００６４】
撮像部２３０は、操作表示部２２０のタッチパネル上の物体を撮像する。本実施形態では、撮像部２３０は、カメラを備え、視線検出部として機能する。本実施形態では、撮像部２３０は、ユーザーの視線方向を検出するため、ユーザーの眼を撮像する。撮像部２３０によって撮像されたデータは、制御部２４０に送信される。
【００６５】
制御部２４０は、通信部２１０、操作表示部２２０および撮像部２３０を制御する。図４に示すように、制御部２４０は、補助記憶装置２４１、メモリー２４２およびＣＰＵ２４３を有する。
【００６６】
補助記憶装置２４１には、オペレーティングシステム、操作表示プログラムＰ’など各種ソフトウェアプログラムが格納されている。操作表示プログラムＰ’は、後述するように、本実施形態の操作表示方法を実現するためのソフトウェアプログラムである。操作表示プログラムＰ’は、予め補助記憶装置２４１にインストールされていてもよいし、あるいは必要に応じてサーバー３００からダウンロードされてもよい。
【００６７】
メモリー２４２については、ＭＦＰ１００のメモリー１８２と同様の構成を有するので、説明の重複を避けるため、詳細な説明を省略する。
【００６８】
＜操作表示装置の連携＞
次に、図５を参照して、本実施形態の操作表示装置の連携について説明する。図５は、第１の実施形態の操作表示システムにおける操作表示装置の連携について説明するための模式図である。
【００６９】
本実施形態では、ＭＦＰ１００と携帯端末２００Ａとの間の距離が所定距離以内である場合、ＭＦＰ１００および携帯端末２００Ａは連携を開始する。
【００７０】
連携が開始されると、制御部１８０と制御部２４０とが連携し、通信部１４０および通信部２１０を介して表示データや制御信号が交換される。制御部１８０および制御部２４０は、たとえばＭＦＰ１００の右隣に携帯端末２００Ａが置かれた場合、互いに関連するオブジェクトが操作表示部１６０から操作表示部２２０にかけて連続的に表示されるように制御する。図５に示す例では、操作表示部１６０および操作表示部２２０が１つの大きな画面を構成し、メニュー画面の一部である「機能１」〜「機能４」の操作オブジェクト（ボタン）を表示している。
【００７１】
ユーザーが上記メニュー画面をタッチして操作する場合、操作表示部１６０および操作表示部２２０は、連携してユーザーの画面操作を処理する。したがって、ユーザーは、操作表示部１６０および操作表示部２２０を１つの操作表示部として操作することが可能となる。たとえば、ユーザーがスワイプ操作などにより操作表示部１６０の表示内容を右方向にスクロールすると、操作表示部２２０の表示内容もそれに連動して右方向にスクロールされる。このように、操作表示部１６０および操作表示部２２０は、操作表示部１６０および操作表示部２２０の表示内容が画面の操作に応じて連動するように、一体的にオブジェクトを表示する。
【００７２】
なお、操作表示部１６０および操作表示部２２０の２つのタッチパネルに跨って表示されている操作オブジェクト（図５では、「機能３」のボタン）がマルチ操作可能なオブジェクトであれば、ユーザーは当該オブジェクトに対してマルチ操作をすることもできる。
【００７３】
また、図５には、ＭＦＰ１００および携帯端末２００Ａの２台の操作表示装置を連携する場合について例示されているが、本実施形態において連携可能な操作表示装置の台数は２台の場合に限定されない。
【００７４】
また、上記所定距離は、とくに限定されることはないが、たとえば数ｃｍ程度に設定されることが好ましい。しかしながら、ユーザーの利便性を考慮して、上記所定距離を数メートル〜数十メートルに設定することも可能である。
【００７５】
さらに、図５には、ＭＦＰ１００および携帯端末２００Ａの２台の操作表示装置が紙面の横方向に連携する場合について例示されているが、縦方向に連携することもできる。
【００７６】
このように、１つのタッチパネルだけでは、画面の大きさが限られ、一度に表示できないオブジェクトがある場合、複数の操作表示装置を連携させることにより、一度により多くのオブジェクトを表示し、操作することが可能となる。
【００７７】
以上のような構成を有するＭＦＰ１００および携帯端末２００Ａを使用して、本実施形態の操作表示方法の処理手順を実行する具体例を図６Ａ〜図６Ｄ、図７および図８を参照して説明する。本実施形態の操作表示方法は、上記操作表示プログラムＰ，Ｐ’がそれぞれＣＰＵ１８３，２４３によって実行されることにより実現される。操作表示プログラムＰ，Ｐ’は、ＭＦＰ１００と携帯端末２００Ａとが協働して本実施形態の操作表示方法を実行するように構成されている。また、操作表示プログラムＰ，Ｐ’は、これら２つのプログラムの関係において、操作表示プログラムＰが主導的な役割を果たしてもよいし、逆に、操作表示プログラムＰ’が主導的な役割を果たしてもよい。以下の説明では、操作表示プログラムＰが主導的な役割を果たす場合について例示する。
【００７８】
＜操作表示方法の概要＞
図６Ａは第１の実施形態の操作表示方法の処理手順の一例を説明するためのフローチャートであり、図６Ｂは、図６Ａに後続する図である。また、図６Ｃは図６Ａの押圧情報を表示する処理（ステップＳ１０７）を説明するためのサブルーチンフローチャートであり、図６Ｄは図６Ｂの押圧情報を表示する処理（ステップＳ１１０）を説明するためのサブルーチンフローチャートである。また、図７は、第１の実施形態において、荷重基準が低い装置から荷重基準が高い装置への操作対象の切り替えについて例示するための模式図である。また、図８は、第１の実施形態において、荷重基準が高い装置から荷重基準が低い装置への操作対象の切り替えについて例示するための模式図である。
【００７９】
＜操作表示方法のメインルーチン＞
図６Ａに示すように、まず、通信可能な携帯端末が近くにあるか否かを判断する（ステップＳ１０１）。制御部１８０は、たとえばＭＦＰ１００と携帯端末２００Ａとの間の距離が上記所定距離以内である場合、通信可能な携帯端末が近くにあると判断し（ステップＳ１０１：ＹＥＳ）、携帯端末２００Ａとの連携表示を開始する（ステップＳ１０２）。以下の説明では、ＭＦＰ１００と携帯端末２００Ａとが連携表示している場合について例示して説明する。一方、通信可能な装置が近くにない場合（ステップＳ１０１：ＮＯ）、通信可能な携帯端末が近くに来るまで待機する。
【００８０】
次に、ＭＦＰ１００および携帯端末２００Ａの荷重基準を取得する（ステップＳ１０３）。制御部１８０は、操作表示部１６０のタッチパネルの荷重基準Ｎ１をメモリー１８２のフラッシュＲＯＭから読み出して取得する。また、制御部２４０は、操作表示部２２０のタッチパネルの荷重基準Ｎ２をメモリー２４２から読み出し、通信部２１０を通じて送信する。制御部１８０は、通信部１４０を通じて、操作表示部２２０のタッチパネルの荷重基準Ｎ２を受信して取得する。
【００８１】
次に、ユーザーが次に操作しようとしている装置を検出する（ステップＳ１０４）。ユーザーが次に操作しようとしている装置（第２の操作表示装置）は、ユーザーが最後に操作した装置（第１の操作表示装置）とは異なる装置であって、ユーザーの指やタッチペンがタッチパネルに最初にタッチする装置であると考えられる。より具体的には、操作表示部１６０は、ユーザーがタッチパネルにタッチした場合、制御部１８０にユーザーがタッチパネルにタッチした旨を通知する。また、操作表示部２２０は、ユーザーがタッチパネルにタッチした場合、ユーザーがタッチパネルにタッチした旨を制御部２４０に通知する。そして、制御部２４０は、通信部２１０を通じて、ユーザーが操作表示部２２０のタッチパネルにタッチした旨を制御部１８０に通知する。このように、制御部１８０は、ユーザーの指やタッチペンがタッチパネルに最初にタッチした装置を検出することにより、第２の操作表示装置を検出する。
【００８２】
次に、操作対象が切り替わったか否かを判断する（ステップＳ１０５）。制御部１８０は、上記ステップＳ１０４において検出された第２の操作表示装置が、第１の操作表示装置と同じ場合、操作対象が切り替わっていないと判断し（ステップＳ１０５：ＮＯ）、ステップＳ１１１の処理に移行する。
【００８３】
一方、ステップＳ１０４において検出された、第２の操作表示装置が、第１の操作表示装置と異なる場合、操作対象が切り替わったと判断する（ステップＳ１０５：ＹＥＳ）。
【００８４】
次に、操作対象表示モードはオンか否かを判断する（ステップＳ１０６）。制御部１８０は、メモリー１８２から操作対象表示モードの設定情報を読み出し、操作対象表示モードがオンではない場合（ステップＳ１０６：ＮＯ）、ステップＳ１０８の処理に移行する。
【００８５】
一方、操作対象表示モードがオンである場合（ステップＳ１０６：ＹＥＳ）、押圧情報を表示する（ステップＳ１０７）。押圧情報は、第２の操作表示装置のタッチパネルの操作に必要な押圧に関する情報である。制御部１８０は、操作対象に応じて押圧情報を表示する。押圧情報を表示する具体的な処理については後述する。
【００８６】
次に、図６Ｂに示すように、視線モードがオンか否かを判断する（ステップＳ１０８）。制御部１８０は、メモリー１８２から視線モードの設定情報を読み出し、視線モードがオンではない場合（ステップＳ１０８：ＮＯ）、ステップＳ１１１の処理に移行する。
【００８７】
一方、視線モードがオンである場合（ステップＳ１０８：ＹＥＳ）、ユーザーの視線方向を検出する（ステップＳ１０９）。制御部１８０は、撮像部１７０を制御して、ユーザーの眼を撮像し、撮像結果に基づいて、ユーザーの視線方向を演算によって推定する。なお、眼の撮像結果に基づいて視線方向を推定するアルゴリズムは公知であるので、詳細な説明を省略する。
【００８８】
次に、押圧情報を表示する（ステップＳ１１０）。制御部１８０は、推定されたユーザーの視線方向の先にＭＦＰ１００がある場合、操作表示部１６０に押圧情報を表示させるように制御する。あるいは制御部１８０は、推定されたユーザーの視線方向の先に携帯端末２００Ａがある場合、操作表示部２２０に押圧情報を表示するように制御部２４０に依頼する。押圧情報を表示する具体的な処理については後述する。
【００８９】
次に、連携対象の携帯端末の位置が離れたか否かを判断する（ステップＳ１１１）。連携対象の携帯端末２００Ａの位置がＭＦＰ１００に対して上記所定距離を超えて離れていない場合（ステップＳ１１１：ＮＯ）、ステップＳ１０４の処理に移行する。
【００９０】
一方、連携対象の携帯端末の位置が離れた場合（ステップＳ１１１：ＹＥＳ）、制御部１８０は、携帯端末２００Ａとの連携表示を解除し（ステップＳ１１２）、処理を終了する（エンド）。
【００９１】
＜押圧情報を表示する処理（ステップＳ１０７）＞
図６Ｃに示すように、まず、操作対象がＭＦＰ１００か否かを判断する（ステップＳ２０１）。操作対象がＭＦＰ１００である場合（ステップＳ２０１：ＹＥＳ）、荷重基準Ｎ１＞荷重基準Ｎ２であるか否かを判断する（ステップＳ２０２）。Ｎ１＞Ｎ２である場合（ステップＳ２０２：ＹＥＳ）、制御部１８０は、操作表示部１６０に、強めに押圧する旨を表示するよう制御する（ステップＳ２０３）。たとえば、図７に示す例では、ユーザーは、携帯端末２００Ａ（荷重基準Ｎ２：低）からＭＦＰ１００（荷重基準Ｎ１：高）に向けてフリック操作をしようとしている。この場合、制御部１８０は、「右の装置よりも強めに押して下さい」のようなメッセージを操作表示部１６０の画面に表示させて、ユーザーに操作表示部１６０のタッチパネルを強めに操作することを促す。そして、制御部１８０は、押圧情報の表示の処理を終了し、図６ＢのフローチャートのステップＳ１０８の処理に移行する（リターン）。
【００９２】
一方、Ｎ１＞Ｎ２ではない場合（ステップＳ２０２：ＮＯ）、制御部１８０は、Ｎ１＝Ｎ２であるか否かを判断する（ステップＳ２０４）。Ｎ１＝Ｎ２である場合（ステップＳ２０４：ＹＥＳ）、制御部１８０は、押圧情報の表示の処理を終了し、図６ＢのフローチャートのステップＳ１０８の処理に移行する（リターン）。
【００９３】
一方、Ｎ１＝Ｎ２ではない場合（ステップＳ２０４：ＮＯ）、すなわちＮ１＜Ｎ２である場合、制御部１８０は、操作表示部１６０に、弱めに押圧する旨を表示するよう制御する（ステップＳ２０５）。たとえば、携帯端末２００Ａ（荷重基準Ｎ２：高）からＭＦＰ１００（荷重基準Ｎ１：低）に向けてユーザーがフリック操作をしようとしている場合、制御部１８０は「右の装置よりも弱めに押して下さい」のようなメッセージを操作表示部１６０に表示させる。そして、制御部１８０は、押圧情報の表示の処理を終了し、図６ＢのフローチャートのステップＳ１０８の処理に移行する（リターン）。
【００９４】
一方、操作対象がＭＦＰ１００ではない場合（ステップＳ２０１：ＮＯ）、すなわち、操作対象が携帯端末２００Ａである場合、制御部１８０は、Ｎ１＞Ｎ２であるか否かを判断する（ステップＳ２０６）。Ｎ１＞Ｎ２である場合（ステップＳ２０６：ＹＥＳ）、制御部２４０は、操作表示部２２０に、弱めに押圧する旨を表示するよう制御する（ステップＳ２０７）。たとえば、図８に示す例では、ユーザーは、ＭＦＰ１００（荷重基準Ｎ１：高）から携帯端末２００Ａ（荷重基準Ｎ２：低）に向けてフリック操作をしようとしている。この場合、制御部２４０は、「左の装置よりも弱めに押してフリックして下さい」のようなメッセージを操作表示部２２０の画面に表示させる。そして、制御部１８０は、押圧情報の表示の処理を終了し、図６ＢのフローチャートのステップＳ１０８の処理に移行する（リターン）。
【００９５】
一方、Ｎ１＞Ｎ２ではない場合（ステップＳ２０６：ＮＯ）、制御部１８０は、Ｎ１＝Ｎ２であるか否かを判断する（ステップＳ２０８）。Ｎ１＝Ｎ２である場合（ステップＳ２０８：ＹＥＳ）、制御部１８０は、押圧情報の表示の処理を終了し、図６ＢのフローチャートのステップＳ１０８の処理に移行する（リターン）。
【００９６】
一方、Ｎ１＝Ｎ２ではない場合（ステップＳ２０８：ＮＯ）、すなわちＮ１＜Ｎ２である場合、制御部２４０は、操作表示部２２０に、強めに押圧する旨を表示するよう制御する（ステップＳ２０９）。たとえば、ＭＦＰ１００（荷重基準Ｎ１：低）から携帯端末２００Ａ（荷重基準Ｎ２：高）に向けてユーザーがフリック操作をしようとしている場合、制御部２４０は、「左の装置よりも強めに押して下さい」のようなメッセージを操作表示部２２０の画面に表示させる。そして、制御部１８０は、押圧情報の表示の処理を終了し、図６ＢのフローチャートのステップＳ１０８の処理に移行する（リターン）。
【００９７】
＜押圧情報を表示する処理（ステップＳ１１０）＞
図６Ｄに示すように、まず、視線対象がＭＦＰ１００か否かを判断する（ステップＳ３０１）。制御部１８０は、視線対象がＭＦＰ１００である場合（ステップＳ３０１：ＹＥＳ）、Ｎ１＞Ｎ２であるか否かを判断する（ステップＳ３０２）。制御部１８０は、Ｎ１＞Ｎ２である場合（ステップＳ３０２：ＹＥＳ）、操作表示部１６０に、強めに押圧する旨を表示するよう制御する（ステップＳ３０３）。そして、制御部１８０は、押圧情報の表示の処理を終了し、図６ＢのフローチャートのステップＳ１１１の処理に移行する（リターン）。
【００９８】
一方、Ｎ１＞Ｎ２ではない場合（ステップＳ３０２：ＮＯ）、制御部１８０は、Ｎ１＝Ｎ２であるか否かを判断する（ステップＳ３０４）。Ｎ１＝Ｎ２である場合（ステップＳ３０４：ＹＥＳ）、制御部１８０は、押圧情報の表示の処理を終了し、図６ＢのフローチャートのステップＳ１１１の処理に移行する（リターン）。
【００９９】
一方、Ｎ１＝Ｎ２ではない場合（ステップＳ３０４：ＮＯ）、すなわちＮ１＜Ｎ２である場合、操作表示部１６０に、弱めに押圧する旨を表示するよう制御する（ステップＳ３０５）。そして、制御部１８０は、押圧情報の表示の処理を終了し、図６ＢのフローチャートのステップＳ１１１の処理に移行する（リターン）。
【０１００】
一方、視線対象がＭＦＰ１００ではない場合（ステップＳ３０１：ＮＯ）、すなわち、視線対象が携帯端末２００Ａである場合、制御部１８０は、Ｎ１＞Ｎ２であるか否かを判断する（ステップＳ３０６）。Ｎ１＞Ｎ２である場合（ステップＳ３０６：ＹＥＳ）、制御部１８０は、操作表示部２２０に、弱めに押圧する旨を表示させるよう制御する（ステップＳ３０７）。
【０１０１】
一方、Ｎ１＞Ｎ２ではない場合（ステップＳ３０６：ＮＯ）、制御部１８０は、Ｎ１＝Ｎ２であるか否かを判断する（ステップＳ３０８）。Ｎ１＝Ｎ２である場合（ステップＳ３０８：ＹＥＳ）、制御部１８０は、押圧情報の表示の処理を終了し、図６ＢのフローチャートのステップＳ１１１の処理に移行する（リターン）。
【０１０２】
一方、Ｎ１＝Ｎ２ではない場合（ステップＳ３０８：ＮＯ）、すなわちＮ１＜Ｎ２である場合、制御部１８０は、操作表示部２２０に、強めに押圧する旨を表示するよう制御する（ステップＳ３０９）。そして、制御部１８０は、押圧情報の表示の処理を終了し、図６ＢのフローチャートのステップＳ１１１の処理に移行する（リターン）。
【０１０３】
以上のとおり、図６Ａ〜図６Ｄ、図７および図８を参照して、本実施形態の操作表示方法の処理手順の一例を説明した。上記操作表示方法では、制御部１８０は、ＭＦＰ１００および携帯端末２００Ａ，２００Ｂ，２００Ｃのうち、ユーザーが最後に操作した装置と、次に操作しようとしている装置とについて荷重基準を取得し、比較する。そして、制御部１８０は、荷重基準を比較した結果、差異がある場合、上記次に操作しようとしている装置のタッチパネルを押下する押圧力の変化の度合いを表示するように制御する。
【０１０４】
（変形例）
上述の操作表示方法の一例では、操作表示部１６０または操作表示部２２０に、次に操作しようとしている操作表示装置のタッチパネルを押下する押圧力の変化の度合いを「強め」または「弱め」といった言葉で通知する場合について例示した。しかしながら、上記押圧力の変化の度合いを、言葉で通知するのではなく、他の表現方法で表示することも可能である。以下、図９Ａおよび図９Ｂを参照して、上記押圧力の変化の度合いを通知する他の例について説明する。
【０１０５】
図９Ａは第１の実施形態において、押圧力の変化の度合いを視覚的に表現する一例を示す模式図であり、図９Ｂは押圧力の変化の度合いを視覚的に表現する他の例を示す模式図である。
【０１０６】
図９Ａに示すように、表示される操作オブジェクト（たとえば、ボタン）を「ごつごつした石」のような硬いイメージで表現することにより、荷重基準が高く、タッチパネルを強めに操作する必要があることをユーザーに知らせることが可能である。
【０１０７】
一方、図９Ｂに示すように、ボタンを滑らかなイメージで表現することにより、荷重基準が低く、タッチパネルを弱めに操作する必要があることをユーザーに知らせることが可能である。
【０１０８】
また、操作表示部１６０または操作表示部２２０に言葉やイメージを表示することによって押圧力の変化の度合いを通知するのではなく、ＭＦＰ１００または携帯端末２００Ａに内蔵されたスピーカーを使用して音や音声によってユーザーに通知してもよい。
【０１０９】
以上説明した本実施形態の操作表示システム、操作表示装置および操作表示プログラムは下記の効果を奏する。
【０１１０】
ユーザーが最後に操作した第１の操作表示装置と、次に操作しようとしている第２の操作表示装置とについて、荷重基準を比較した結果、差異がある場合、上記第２の操作表示装置のタッチパネルを押下する押圧力の変化の度合いを通知する。したがって、第１の操作表示装置と第２の操作表示装置との間において荷重基準に差異があることがユーザーに認識されるので、第１の操作表示装置と第２の操作表示装置との間の荷重基準の差異に起因する操作性の相違によるユーザーへの負担を軽減できる。
【０１１１】
具体的には、荷重基準の弱い装置から強い装置へ操作対象を切り替える際、ユーザーに強めに押圧した方がよい旨を知らせることにより、ユーザーが荷重基準の強い装置に対しても荷重基準の弱い装置と同じようにタッチパネルを弱く押圧することを抑制できる。したがって、ユーザーが荷重基準の強い装置のタッチパネルを弱く押圧してしまうことにより、ユーザーのタッチ操作が操作として認識されないことが抑制される。
【０１１２】
また、荷重基準の弱い装置は、荷重基準の強い装置よりも弱い押圧力で操作できるため、通常、ユーザーにとって操作がしやすいと感じられることが多い。しかし、ユーザーが荷重基準の弱い装置のタッチパネルを強く押圧してしまうと、操作がしやすいという荷重基準の弱い装置の利点が生かされないばかりか、タッチパネルを損傷させてしまう可能性もある。本実施形態では、荷重基準の強い装置から弱い装置へ操作対象を切り替える際、ユーザーに弱めに押圧した方がよい旨を知らせることにより、ユーザーが荷重基準の弱い装置に対しても荷重基準の強い装置と同じようにタッチパネルを強く押圧することを抑制できる。
【０１１３】
また、荷重基準に差異がある場合のみ、すなわち通知が必要な場合のみユーザーに荷重基準の変化の度合い、すなわち低い荷重基準から高い荷重基準に変化する場合は「強め」、または高い荷重基準から低い荷重基準に変化する場合は「弱め」を知らせる。したがって、ユーザーは、最適なタイミングで押圧情報を知ることができ、今までの荷重基準よりも強い押圧力で押すべきか、あるいは弱い押圧力で押すべきかを的確に判断できる。
【０１１４】
（第２の実施形態）
第１の実施形態では、荷重基準が異なる操作表示装置間において、タッチパネルを押下する押圧力の変化の度合いを通知する場合について説明した。
【０１１５】
第２の実施形態では、荷重基準が異なる操作表示装置間において、ユーザーが画面操作をした結果、操作オブジェクトが２つの操作表示装置間に跨って表示されている場合に、当該操作オブジェクトを荷重基準が低い装置へ移動させる場合について説明する。さらに、タッチパネルを押下する押圧力の変化の度合いを通知する場合について説明する。以下では、説明の重複を避けるため、第１の実施形態と同じ構成については説明を省略する。
【０１１６】
図１０Ａは、第２の実施形態における操作表示方法の処理手順の一例を説明するためのフローチャートである。また、図１０Ｂは図１０Ａの操作オブジェクトの位置を調整する処理（ステップＳ４０７）を説明するためのサブルーチンフローチャートであり、図１０Ｃは図１０Ａの押圧情報を通知する処理（ステップＳ４０８）を説明するためのサブルーチンフローチャートである。また、図１１は第２の実施形態において、操作オブジェクトの位置調整について説明するための模式図であり、図１２は第２の実施形態において、押圧情報の通知について説明するための模式図である。
【０１１７】
＜操作表示方法のメインルーチン＞
図１０Ａに示すように、まず、通信可能な携帯端末が近くにあるか否かを判断する（ステップＳ４０１）。制御部１８０は、ＭＦＰ１００と携帯端末２００Ａとの間の距離が上記所定距離以内である場合、通信可能な携帯端末が近くにあると判断し（ステップＳ４０１：ＹＥＳ）、携帯端末２００Ａと連携表示を開始する（ステップＳ４０２）。以下の説明では、ＭＦＰ１００と携帯端末２００Ａとが連携表示している場合について例示して説明する。一方、通信可能な装置が近くにない場合（ステップＳ４０１：ＮＯ）、通信可能な携帯端末が近くに来るまで待機する。
【０１１８】
次に、ユーザーが画面を操作したか否かを判断する（ステップＳ４０３）。制御部１８０は、ユーザーが操作表示部１６０の画面を操作したか否かを判断する。また、制御部２４０は、ユーザーが操作表示部２２０の画面を操作したか否かを判断する。ユーザーが操作表示部１６０および操作表示部２２０のうちの少なくとも一方の画面を操作した場合（ステップＳ４０３：ＹＥＳ）、ＭＦＰ１００および携帯端末２００Ａの画面表示を更新する（ステップＳ４０４）。
【０１１９】
次に、操作オブジェクトが画面間に跨って表示されているか否かを判断する（ステップＳ４０５）。制御部１８０は、操作オブジェクトがＭＦＰ１００および携帯端末２００Ａの画面間に跨って表示されていない場合（ステップＳ４０５：ＮＯ）、ステップＳ４０９の処理に移行する。
【０１２０】
一方、操作オブジェクトがＭＦＰ１００および携帯端末２００Ａの画面間に跨って表示されている場合（ステップＳ４０５：ＹＥＳ）、ＭＦＰ１００および携帯端末２００Ａの荷重基準Ｎ１およびＮ２を取得する（ステップＳ４０６）。荷重基準Ｎ１およびＮ２の取得方法は、第１の実施形態と同じであるので、説明を省略する。
【０１２１】
次に、操作オブジェクトの位置を調整する（ステップＳ４０７）。制御部１８０は、荷重基準Ｎ１，Ｎ２の比較結果に応じて、ＭＦＰ１００の画面と携帯端末２００Ａの画面に跨って表示されている操作オブジェクトが荷重基準の低い装置の画面内に収まるように当該操作オブジェクトを移動させる。操作オブジェクトの位置を調整する具体的な処理については後述する。
【０１２２】
次に、押圧情報を通知する（ステップＳ４０８）。制御部１８０は、荷重基準Ｎ１，Ｎ２の比較結果に応じて、操作表示部１６０または操作表示部２２０に押圧情報を表示させる。押圧情報を通知する具体的な処理については後述する。
【０１２３】
次に、連携対象の携帯端末２００Ａの位置が離れたか否かを判断する（ステップＳ４０９）。制御部１８０は、連携対象の携帯端末２００Ａの位置が上記所定距離を超えて離れていない場合（ステップＳ４０９：ＮＯ）、ステップＳ４０３の処理に移行する。
【０１２４】
一方、連携対象の携帯端末２００Ａの位置が離れた場合（ステップＳ４０９：ＹＥＳ）、携帯端末２００Ａとの連携表示を解除し（ステップＳ４１０）、処理を終了する（エンド）。
【０１２５】
＜操作オブジェクトの位置を調整する処理（ステップＳ４０７）＞
図１０Ｂに示すように、自動シフトモードがオンか否かを判断する（ステップＳ５０１）。制御部１８０は、メモリー１８２から自動シフトモードの設定情報を読み出し、自動シフトモードがオンではない場合（ステップＳ５０１：ＮＯ）、操作オブジェクトの位置調整の処理を終了し、図１０ＡのステップＳ４０８の処理に移行する（リターン）。
【０１２６】
一方、自動シフトモードがオンである場合（ステップＳ５０１：ＹＥＳ）、制御部１８０は、荷重基準Ｎ１＞荷重基準Ｎ２であるか否かを判断する（ステップＳ５０２）。Ｎ１＞Ｎ２である場合（ステップＳ５０２：ＹＥＳ）、制御部１８０は、たとえば、図１１に示すように、携帯端末２００Ａ（荷重基準Ｎ２：低）の画面内に収まるように「木の画像」の操作オブジェクト（アイコン）を移動（シフト）させる（ステップＳ５０３）。
【０１２７】
一方、Ｎ１＞Ｎ２ではない場合（ステップＳ５０２：ＮＯ）、制御部１８０は、Ｎ１＝Ｎ２であるか否かを判断する（ステップＳ５０４）。Ｎ１＝Ｎ２である場合（ステップＳ５０４：ＹＥＳ）、制御部１８０は、操作オブジェクトの位置調整の処理を終了し、図１０ＡのステップＳ４０８の処理に移行する（リターン）。
【０１２８】
一方、Ｎ１＝Ｎ２ではない場合（ステップＳ５０４：ＮＯ）、すなわちＮ１＜Ｎ２である場合、制御部１８０は、ＭＦＰ１００（荷重基準Ｎ１：低）の画面内に収まるように操作オブジェクトを移動（シフト）させる（ステップＳ５０５）。そして、制御部１８０は、操作オブジェクトの位置調整の処理を終了し、図１０ＡのステップＳ４０８の処理に移行する（リターン）。
【０１２９】
＜押圧情報を通知する処理（ステップＳ４０８）＞
図１０Ｃに示すように、通知モードがオンか否かを判断する（ステップＳ６０１）。制御部１８０は、メモリー１８２から通知モードの設定情報を読み出し、通知モードがオンではない場合（ステップＳ６０１：ＮＯ）、押圧情報の通知の処理を終了し、図１０ＡのステップＳ４０９の処理に移行する（リターン）。
【０１３０】
一方、通知モードがオンである場合（ステップＳ６０１：ＹＥＳ）、制御部１８０は、荷重基準Ｎ１＞荷重基準Ｎ２であるか否かを判断する（ステップＳ６０２）。Ｎ１＞Ｎ２である場合（ステップＳ６０２：ＹＥＳ）、制御部１８０は、操作表示部１６０に、強めに押圧する旨を表示するよう制御する（ステップＳ６０３）。たとえば、図１２に示す例では、ＭＦＰ１００（荷重基準Ｎ１：高）から携帯端末２００Ａ（荷重基準Ｎ２：低）に向けてユーザーがフリック操作をした結果、「木の画像」の操作オブジェクトがＭＦＰ１００と携帯端末２００Ａとの間に跨って表示されている。この場合、制御部１８０は、「左の装置よりも強めに押して下さい」のようなメッセージを操作表示部１６０の画面に表示させて、ユーザーに操作表示部１６０のタッチパネルを強めに操作することを促す。そして、制御部１８０は、押圧情報の通知の処理を終了し、図１０ＡのステップＳ４０９の処理に移行する（リターン）。
【０１３１】
一方、Ｎ１＞Ｎ２ではない場合（ステップＳ６０２：ＮＯ）、制御部１８０は、Ｎ１＝Ｎ２であるか否かを判断する（ステップＳ６０４）。Ｎ１＝Ｎ２である場合（ステップＳ６０４：ＹＥＳ）、制御部１８０は、押圧情報の通知の処理を終了し、図１０ＡのステップＳ４０９の処理に移行する（リターン）。
【０１３２】
一方、Ｎ１＝Ｎ２ではない場合（ステップＳ６０４：ＮＯ）、すなわちＮ１＜Ｎ２である場合、制御部２４０は、強めに押圧する旨を表示するよう操作表示部２２０を制御する（ステップＳ６０５）。そして、制御部１８０は、押圧情報の通知の処理を終了し、図１０ＡのステップＳ４０９の処理に移行する（リターン）。
【０１３３】
以上のとおり、図１０Ａ〜図１０Ｃ、図１１および図１２を参照して、本実施形態の操作表示方法の処理手順の一例を説明した。上記操作表示方法では、制御部１８０は、ＭＦＰ１００（自装置）と携帯端末２００Ａ（他の操作表示装置）とについて、荷重基準を取得し、比較する。そして、制御部１８０は、ＭＦＰ１００の画面と携帯端末２００Ａの画面とに跨って、操作オブジェクトが表示されている場合、ＭＦＰ１００の荷重基準Ｎ１と携帯端末２００Ａの荷重基準Ｎ２とを比較した結果に応じて、表示制御を変更させる。具体的には、制御部１８０は、荷重基準の低い装置の画面内に収まるように操作オブジェクトを移動させる。さらに、制御部１８０は、タッチパネルを押下する押圧力の変化の度合いを通知するように操作表示部１６０または操作表示部２２０を制御する。
【０１３４】
以上説明した本実施形態の操作表示システム、操作表示装置および操作表示プログラムは下記の効果を奏する。
【０１３５】
荷重基準が異なる操作表示装置間に操作オブジェクトが跨って表示されている場合、荷重基準の低い装置の画面内に収まるように当該操作オブジェクトを移動させるので、ピンチインやピンチアウトなどのマルチタッチ操作を行いやすくなる。また、操作表示装置間において荷重基準に差異があることがユーザーに認識されるので、荷重基準の差異に起因する操作性の相違によるユーザーへの負担を軽減できる。
【０１３６】
（第３の実施形態）
第２の実施形態では、荷重基準が異なる操作表示装置間において、ユーザーが画面操作をした結果、操作オブジェクトが跨って表示されている場合に、当該操作オブジェクトを荷重基準の低い方へ移動させる場合について説明した。また、タッチパネルを押下する押圧力の変化の度合いを通知する場合について説明した。
【０１３７】
第３の実施形態では、荷重基準が異なる操作表示装置間に操作オブジェクトが跨って表示されている場合に、ユーザーの指などが各々の操作表示装置の操作オブジェクトにタッチしたときにタッチパネルの操作に関する情報を通知する場合について説明する。さらに、ユーザーの指などが各々の操作表示装置の操作オブジェクトにタッチしたときに当該操作オブジェクトを荷重基準の低い方へ移動させる場合について説明する。以下では、説明の重複を避けるため、第１および第２の実施形態と同じ構成については説明を省略する。
【０１３８】
図１３Ａは、第３の実施形態における操作表示方法の処理手順の一例を説明するためのフローチャートである。また、図１３Ｂは図１３Ａの押圧情報を通知する処理（ステップＳ７０８）を説明するためのサブルーチンフローチャートである。また、図１４は第３の実施形態において、押圧情報の通知について説明するための模式図である。
【０１３９】
＜操作表示方法のメインルーチン＞
図１３ＡにおけるステップＳ７０１〜Ｓ７０６の処理は、第２の実施形態の図１０ＡにおけるステップＳ４０１〜Ｓ４０６の処理と同じである。したがって、説明の重複を避けるため、ステップＳ７０１〜Ｓ７０６の処理についての詳細な説明を省略する。
【０１４０】
ステップＳ７０７において、操作オブジェクトが跨って表示されている状態で、ユーザーの指などが各々の装置のオブジェクトにタッチしたか否かを判断する。制御部１８０は、たとえばユーザーの親指および人差し指が、それぞれＭＦＰ１００および携帯端末２００Ａの操作オブジェクトにタッチしたか否かを判断する。ユーザーの指などが各々の装置の操作オブジェクトにタッチしていない場合（ステップＳ７０７：ＮＯ）、ステップＳ７０３の処理に移行する。
【０１４１】
一方、ユーザーの指などが各々の装置のオブジェクトにタッチした場合（ステップＳ７０７：ＹＥＳ）、押圧情報を通知する（ステップＳ７０８）。制御部１８０は、荷重基準Ｎ１，Ｎ２の比較結果に応じて、押圧情報およびタッチパネルの操作に関する情報を通知する。押圧情報を通知する具体的な処理については後述する。
【０１４２】
次に、操作オブジェクトの位置を調整する（ステップＳ７０９）。操作オブジェクトの位置調整の処理については、第２の実施形態の図１０Ｂに示す処理と同様であるので、詳細な説明を省略する。
【０１４３】
次に、連携対象の携帯端末２００Ａの位置が離れたか否かを判断する（ステップＳ７１０）。制御部１８０は、連携対象の携帯端末２００Ａの位置が上記所定距離を超えて離れていない場合（ステップＳ７１０：ＮＯ）、ステップＳ７０３の処理に移行する。
【０１４４】
一方、連携対象の携帯端末２００Ａの位置が離れた場合（ステップＳ７１０：ＹＥＳ）、携帯端末２００Ａとの連携表示を解除し（ステップＳ７１１）、処理を終了する（エンド）。
【０１４５】
＜押圧情報を通知する処理（ステップＳ７０８）＞
図１３Ｂに示すように、通知モードがオンか否かを判断する（ステップＳ８０１）。制御部１８０は、メモリー１８２から通知モードの設定情報を読み出し、通知モードがオンではない場合（ステップＳ８０１：ＮＯ）、押圧情報の通知の処理を終了し、図１３ＡのステップＳ７０９の処理に移行する（リターン）。
【０１４６】
一方、通知モードがオンである場合（ステップＳ８０１：ＹＥＳ）、制御部１８０は、荷重基準Ｎ１＞荷重基準Ｎ２であるか否かを判断する（ステップＳ８０２）。Ｎ１＞Ｎ２である場合（ステップＳ８０２：ＹＥＳ）、制御部１８０は、操作表示部１６０に、指がタッチした付近を強めに押圧する旨を表示するよう制御する（ステップＳ８０３）。また、制御部２４０は、操作表示部２２０に、指がタッチした付近を弱めに押圧する旨を表示するよう制御する（ステップＳ８０４）。さらに、制御部１８０は、操作表示部１６０に、操作オブジェクトを携帯端末２００Ａ側に移動させると操作が楽になる旨を表示させる（ステップＳ８０５）。たとえば、図１４に示すように、ユーザーの親指が携帯端末２００Ａにタッチし、人差し指がＭＦＰ１００にタッチした場合、制御部１８０は、人差し指付近に「強め」、親指付近に「弱め」のようなメッセージを表示させる。また、制御部１８０は、たとえば、指がタッチしている部分の近傍に「左の装置上にずらした方が、操作が楽です」のようなメッセージを操作表示部１６０に表示させる。上記メッセージは、ポップアップを使用してもよいし、文字列だけでもよい。そして、制御部１８０は、押圧情報の通知の処理を終了し、図１３ＡのステップＳ７０９の処理に移行する（リターン）。
【０１４７】
一方、Ｎ１＞Ｎ２ではない場合（ステップＳ８０２：ＮＯ）、Ｎ１＝Ｎ２であるか否かを判断する（ステップＳ８０６）。Ｎ１＝Ｎ２である場合（ステップＳ８０６：ＹＥＳ）、制御部１８０は、押圧情報の通知の処理を終了し、図１３ＡのステップＳ７０９の処理に移行する（リターン）。
【０１４８】
一方、Ｎ１＝Ｎ２ではない場合（ステップＳ８０６：ＮＯ）、すなわちＮ１＜Ｎ２である場合、制御部１８０は、操作表示部１６０に、指がタッチした付近を弱めに押圧する旨を表示するよう制御する（ステップＳ８０７）。また、制御部２４０は、操作表示部２２０に、指がタッチした付近を強めに押圧する旨を表示するよう制御する（ステップＳ８０８）。さらに、制御部１８０は、操作表示部２２０に、操作オブジェクトをＭＦＰ１００側に移動させると操作が楽になる旨を表示させる。そして、制御部１８０は、押圧情報の通知の処理を終了し、図１３ＡのステップＳ７０９の処理に移行する（リターン）。
【０１４９】
以上のとおり、図１３Ａ〜図１３Ｃおよび図１４を参照して、本実施形態の操作表示方法の処理手順の一例を説明した。上記操作表示方法では、制御部１８０は、ＭＦＰ１００（自装置）と携帯端末２００Ａ（他の操作表示装置）とについて、荷重基準を取得し、比較する。操作オブジェクトがＭＦＰ１００および携帯端末２００Ａの両画面に跨って表示されており、ユーザーの指などが各々の画面の当該操作オブジェクトにタッチした場合、荷重基準の比較結果に応じて、押圧情報およびタッチパネルの操作に関する情報が通知される。さらに、荷重基準の低い装置の画面内に収まるように当該操作オブジェクトを移動させる。
【０１５０】
以上説明した本実施形態の操作表示システム、操作表示装置および操作表示プログラムは下記の効果を奏する。
【０１５１】
タッチパネルの操作に関する情報が通知されるので、操作表示装置間の荷重基準の差異に起因する操作性の相違によるユーザーへの負担を軽減できる。また、荷重基準が低い装置の画面内に収まるように操作オブジェクトが移動されるので、ピンチインやピンチアウトなどのマルチタッチ操作を行いやすくなる。
【０１５２】
本発明は、上述した実施形態のみに限定されるものではなく、特許請求の範囲内において、種々改変することができる。たとえば、上述の第１の実施形態において、ユーザーが最後に操作した装置とは異なる装置であって、ユーザーの指やタッチペンがタッチパネルに最初にタッチする装置をユーザーが次に操作しようとしている装置とする場合について説明した。しかしながら、このような場合に限定されず、撮像部を使用して操作表示部に接近するユーザーの指やタッチペンを撮像し、画像解析することにより、ユーザーが次に操作しようとしている装置を撮像結果に基づいて検出することもできる。このような構成によれば、制御部は、ユーザーがタッチパネルにタッチする前に押圧情報を操作表示部に表示させることが可能である。その結果、ユーザーは、押圧情報を確認してから十分な時間的な余裕を持ってタッチ操作を開始することができるので、荷重基準の差異に起因する操作性の相違によるユーザーへの負担をより軽減できる。
【０１５３】
また、上述の第１〜第３の実施形態では、ＭＦＰと携帯端末とが協働して操作表示方法を実現し、ＭＦＰと携帯端末との関係においてＭＦＰが主導的な役割を果たす場合について説明した。しかしながら、本発明はこのような場合に限定されず、たとえばサーバー、ＭＦＰおよび携帯端末が協働して操作表示方法を実現し、サーバー、ＭＦＰおよび携帯端末の間の関係においてサーバーが主導的な役割を果たすように構成してもよい。すなわち、サーバーが、荷重基準を取得および比較し、ＭＦＰおよび携帯端末の操作表示部に押圧情報を表示させるように制御する機能を有するように構成してもよい。
【０１５４】
また、上述の第１〜第３の実施形態では、静電容量式と抵抗膜式のタッチパネルの間において荷重基準に差異がある場合について説明した。しかしながら、本発明はこのような場合に限定されず、静電容量式同士、抵抗膜式同士、またはその他の方式同士で荷重基準に差異がある場合についても適用できる。
【０１５５】
また、上述の第１〜第３の実施形態では、静電容量式の方が抵抗膜式に比べて操作がしやすい場合を例に挙げて説明した。しかしながら、周囲の環境やタッチパネルの使用条件によっては抵抗膜式の方が操作しやすい場合もありうる。たとえば、ユーザーが手袋をして操作する場合やユーザーが乾燥している指で操作する場合は、静電容量式よりも抵抗膜式のタッチパネルを備える操作表示装置の使用を促すこともありうる。
【０１５６】
また、上述の第１〜第３の実施形態では、荷重基準が異なる２つの操作表示装置が連携表示している場合を例示して説明したが、本発明はこのような場合に限定されず、操作表示装置が連携表示していない場合についても適用できる。
【符号の説明】
【０１５７】
Ｐ，Ｐ’  操作表示プログラム、
１００  画像形成装置（ＭＦＰ）、
１１０  画像読取部、
１２０  画像処理部、
１３０  画像形成部、
１４０  通信部、
１５０  給紙部、
１６０  操作表示部、
１７０  撮像部、
１８０  制御部、
１８１  補助記憶装置、
１８２  メモリー、
１８３  ＣＰＵ、
２００Ａ，２００Ｂ，２００Ｃ  携帯端末装置（携帯端末）、
２１０  通信部、
２２０  操作表示部、
２３０  撮像部、
２４０  制御部、
２４１  補助記憶装置、
２４２  メモリー、
２４３  ＣＰＵ、
３００  サーバー、
４００  操作表示システム。
【図１】
2016225762.tif 000003
【図２】
2016225762.tif 000004
【図３】
2016225762.tif 000005
【図４】
2016225762.tif 000006
【図５】
2016225762.tif 000007
【図６Ａ】
2016225762.tif 000008
【図６Ｂ】
2016225762.tif 000009
【図６Ｃ】
2016225762.tif 000010
【図６Ｄ】
2016225762.tif 000011
【図７】
2016225762.tif 000012
【図８】
2016225762.tif 000013
【図９Ａ】
2016225762.tif 000014
【図９Ｂ】
2016225762.tif 000015
【図１０Ａ】
2016225762.tif 000016
【図１０Ｂ】
2016225762.tif 000017
【図１０Ｃ】
2016225762.tif 000018
【図１１】
2016225762.tif 000019
【図１２】
2016225762.tif 000020
【図１３Ａ】
2016225762.tif 000021
【図１３Ｂ】
2016225762.tif 000022
【図１４】
2016225762.tif 000023