(57)【要約】【課題】対象物にユーザを案内するための情報を提供する。【解決手段】目的の対象物に紐付く対象物画像と対象物をユーザに案内するための案内情報とが表示手段に表示され、対象物画像と案内情報との関係に応じて、案内情報の表示態様が変えられる。【選択図】図２５
2019075126.tif 000002
【特許請求の範囲】
【請求項１】
目的の対象物に紐付く対象物画像と前記対象物をユーザに案内するための案内情報とを表示手段に表示させ、前記対象物画像と前記案内情報との関係に応じて、前記案内情報の表示態様を変える制御手段を有する情報処理装置。
【請求項２】
前記制御手段は、前記表示態様として、前記案内情報の表示位置、表示色、及び、表示サイズの中の少なくとも１つを変える、
ことを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記案内情報は、ユーザの位置を基準として前記対象物の方向を指し示す方向画像、前記対象物の目印となる目印画像、及び、前記対象物に前記ユーザが到達するための補足情報の中の少なくとも１つである、
ことを特徴とする請求項１又は請求項２に記載の情報処理装置。
【請求項４】
前記制御手段は、前記補足情報と前記対象物画像とが重なっている場合、前記補足情報の表示態様を変える、
ことを特徴とする請求項３に記載の情報処理装置。
【請求項５】
前記制御手段は、前記補足情報と他の画像とが重ならないように前記補足情報の表示態様を変える、
ことを特徴とする請求項３に記載の情報処理装置。
【請求項６】
前記制御手段は、前記補足情報と他の画像とが重ならないように前記補足情報に含まれる各情報を分けて前記表示手段に表示させる、
ことを特徴とする請求項３に記載の情報処理装置。
【請求項７】
前記制御手段は、前記補足情報を他の画像と重ねずに表示することができない場合、前記補足情報を音声情報として出力する、
ことを特徴とする請求項３に記載の情報処理装置。
【請求項８】
目的の対象物に紐付く対象物画像を表示手段に表示させ、ユーザの位置を基準として前記対象物の方向を指し示す方向画像を前記表示手段に表示させる制御手段を有する情報処理装置。
【請求項９】
前記制御手段は、更に、前記対象物の目印となる目印画像を前記表示手段に表示させる、
ことを特徴とする請求項８に記載の情報処理装置。
【請求項１０】
前記制御手段は、前記対象物画像上に前記目印画像を重畳させて前記表示手段に表示させる、
ことを特徴とする請求項９に記載の情報処理装置。
【請求項１１】
前記制御手段は、前記目印画像の表示位置に背景画像が表示されている場合、前記背景画像上に前記目印画像を重畳させて前記表示手段に表示させる、
ことを特徴とする請求項１０に記載の情報処理装置。
【請求項１２】
コンピュータを、
目的の対象物に紐付く対象物画像と前記対象物をユーザに案内するための案内情報とを表示手段に表示させ、前記対象物画像と前記案内情報との関係に応じて、前記案内情報の表示態様を変える制御手段、
として機能させるプログラム。
【請求項１３】
コンピュータを、
目的の対象物に紐付く対象物画像を表示手段に表示させ、ユーザの位置を基準として前記対象物の方向を指し示す方向画像を前記表示手段に表示させる制御手段、
として機能させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理装置及びプログラムに関する。
【背景技術】
【０００２】
特許文献１，２には、コンピュータグラフィックで生成された背景を、現実の背景と同様の操作で撮影するためのカメラが開示されている。
【０００３】
特許文献３には、撮影画像に映る被写体とバーチャルオブジェクトとの奥行き方向での前後関係を判断し、撮影画像にバーチャルオブジェクトが合成された画像を生成する技術が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１２−１６５４４７号公報
【特許文献２】特開２００８−２８８９２２号公報
【特許文献３】特開２０１２−５８９６８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明の目的は、対象物にユーザを案内するための情報を提供することにある。
【課題を解決するための手段】
【０００６】
請求項１に係る発明は、目的の対象物に紐付く対象物画像と前記対象物をユーザに案内するための案内情報とを表示手段に表示させ、前記対象物画像と前記案内情報との関係に応じて、前記案内情報の表示態様を変える制御手段を有する情報処理装置である。
【０００７】
請求項２に係る発明は、前記制御手段は、前記表示態様として、前記案内情報の表示位置、表示色、及び、表示サイズの中の少なくとも１つを変える、ことを特徴とする請求項１に記載の情報処理装置である。
【０００８】
請求項３に係る発明は、前記案内情報は、ユーザの位置を基準として前記対象物の方向を指し示す方向画像、前記対象物の目印となる目印画像、及び、前記対象物に前記ユーザが到達するための補足情報の中の少なくとも１つである、ことを特徴とする請求項１又は請求項２に記載の情報処理装置である。
【０００９】
請求項４に係る発明は、前記制御手段は、前記補足情報と前記対象物画像とが重なっている場合、前記補足情報の表示態様を変える、ことを特徴とする請求項３に記載の情報処理装置である。
【００１０】
請求項５に係る発明は、前記制御手段は、前記補足情報と他の画像とが重ならないように前記補足情報の表示態様を変える、ことを特徴とする請求項３に記載の情報処理装置である。
【００１１】
請求項６に係る発明は、前記制御手段は、前記補足情報と他の画像とが重ならないように前記補足情報に含まれる各情報を分けて前記表示手段に表示させる、ことを特徴とする請求項３に記載の情報処理装置である。
【００１２】
請求項７に係る発明は、前記制御手段は、前記補足情報を他の画像と重ねずに表示することができない場合、前記補足情報を音声情報として出力する、ことを特徴とする請求項３に記載の情報処理装置である。
【００１３】
請求項８に係る発明は、目的の対象物に紐付く対象物画像を表示手段に表示させ、ユーザの位置を基準として前記対象物の方向を指し示す方向画像を前記表示手段に表示させる制御手段を有する情報処理装置である。
【００１４】
請求項９に係る発明は、前記制御手段は、更に、前記対象物の目印となる目印画像を前記表示手段に表示させる、ことを特徴とする請求項８に記載の情報処理装置である。
【００１５】
請求項１０に係る発明は、前記制御手段は、前記対象物画像上に前記目印画像を重畳させて前記表示手段に表示させる、ことを特徴とする請求項９に記載の情報処理装置である。
【００１６】
請求項１１に係る発明は、前記制御手段は、前記目印画像の表示位置に背景画像が表示されている場合、前記背景画像上に前記目印画像を重畳させて前記表示手段に表示させる、ことを特徴とする請求項１０に記載の情報処理装置である。
【００１７】
請求項１２に係る発明は、コンピュータを、目的の対象物に紐付く対象物画像と前記対象物をユーザに案内するための案内情報とを表示手段に表示させ、前記対象物画像と前記案内情報との関係に応じて、前記案内情報の表示態様を変える制御手段、として機能させるプログラムである。
【００１８】
請求項１３に係る発明は、コンピュータを、目的の対象物に紐付く対象物画像を表示手段に表示させ、ユーザの位置を基準として前記対象物の方向を指し示す方向画像を前記表示手段に表示させる制御手段、として機能させるプログラムである。
【発明の効果】
【００１９】
請求項１−１３に係る発明によれば、対象物にユーザを案内するための情報を提供することができる。
【図面の簡単な説明】
【００２０】
【図１】本発明の第１実施形態に係る情報処理システムの構成を示すブロック図である。
【図２】端末装置の構成を示すブロック図である。
【図３】サーバの構成を示すブロック図である。
【図４】画像形成装置の外観を示す模式図である。
【図５】画面を示す図である。
【図６】画面を示す図である。
【図７】画面を示す図である。
【図８】画面を示す図である。
【図９】画像形成装置とユーザを示す模式図である。
【図１０】画面を示す図である。
【図１１】画面を示す図である。
【図１２】画面を示す図である。
【図１３】画面を示す図である。
【図１４】画面を示す図である。
【図１５】画面を示す図である。
【図１６】画面を示す図である。
【図１７】画面を示す図である。
【図１８】画面を示す図である。
【図１９】画面を示す図である。
【図２０】画像形成装置とユーザとの位置関係を示す図である。
【図２１】画面を示す図である。
【図２２】画面を示す図である。
【図２３】画像形成装置とユーザとの位置関係を示す図である。
【図２４】ユーザとオブジェとの間の位置関係を示す図である。
【図２５】画面を示す図である。
【図２６】画面を示す図である。
【図２７】画面を示す図である。
【図２８】画面を示す図である。
【発明を実施するための形態】
【００２１】
＜第１実施形態＞
図１を参照して、本発明の第１実施形態に係る情報処理システムについて説明する。図１には、第１実施形態に係る情報処理システムの一例が示されている。
【００２２】
第１実施形態に係る情報処理システムは、一例として、端末装置１０とサーバ１２を含む。図１に示す例では、端末装置１０とサーバ１２は、ネットワーク等の通信経路Ｎを介して互いに通信する機能を備えている。情報処理システムには、複数の端末装置１０や複数のサーバ１２が含まれていてもよい。
【００２３】
端末装置１０は、パーソナルコンピュータ（ＰＣ）、タブレットＰＣ、スマートフォン、携帯電話、等の装置であり、他の装置との間でデータを送受信する機能を有する。また、端末装置１０は、ウェアラブル端末（腕時計型端末、リストバンド型端末、眼鏡型端末、指輪型端末、コンタクトレンズ型端末、体内埋め込み型端末、ヒアラブル端末等）であってもよい。
【００２４】
サーバ１２は、データの管理、ユーザ情報の管理等を行う装置である。
【００２５】
第１実施形態では、一例として、ＡＲ（Augmented Reality）技術（拡張現実技術）を用いることで、各種の情報が端末装置１０に表示される。例えば、撮影対象に紐付く情報が端末装置１０に表示される。ＡＲ技術として公知のＡＲ技術が用いられる。例えば、位置情報を利用する位置ＡＲ技術、画像解析を利用する画像ＡＲ技術、等が用いられる。画像ＡＲ技術として、例えば、２次元バーコード等のマーカを利用するマーカ型ＡＲ技術、マーカを利用せずに画像認識技術を利用するマーカレス型ＡＲ技術、等が用いられる。
【００２６】
以下、図２を参照して、端末装置１０の構成について詳しく説明する。
【００２７】
通信部１４は通信インターフェースであり、他の装置にデータを送信する機能、及び、他の装置からデータを受信する機能を有する。通信部１４は、無線通信機能を有する通信インターフェースであってもよいし、有線通信機能を有する通信インターフェースであってもよい。通信部１４は、例えば、１又は複数の種類の通信方式に対応しており、通信相手に適した通信方式（つまり、通信相手が対応している通信方式）に従って通信相手と通信してもよい。通信方式は、例えば、赤外線通信、可視光通信、Ｗｉ−Ｆｉ（登録商標）通信、近接無線通信（例えばＮＦＣ（Near Field Communication）等）、等である。近接無線通信としては、Ｆｅｌｉｃａ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（ブルートゥース）（登録商標）、ＲＦＩＤ（Radio Frequency Identifier）等が用いられる。もちろん、別の方式の無線通信が近接無線通信として用いられてもよい。通信部１４は、例えば、通信相手に応じて通信方式や周波数帯域を切り替えてもよいし、周囲の環境に応じて通信方式や周波数帯域を切り替えてもよい。
【００２８】
ＵＩ部１６はユーザインターフェース部であり、表示部と操作部を含む。表示部は、例えば液晶ディスプレイ等の表示装置である。操作部は、例えばタッチパネルやキーボード等の入力装置である。もちろん、表示部と操作部を兼ねたユーザインターフェース（例えば、タッチ式のディスプレイや、ディスプレイ上に電子的にキーボード等を表示する装置等を含む）であってもよい。また、ＵＩ部１６は、マイク等の集音部やスピーカ等の音声発生部を含んでいてもよい。この場合、音声入力によって情報が端末装置１０に入力されてもよいし、音声によって情報が発せられてもよい。
【００２９】
撮影手段としてのカメラ１８は、撮影対象を撮影することで画像データ（例えば静止画像データや動画像データ）を生成する。画像は例えばＵＩ部１６の表示部に表示される。表示部に表示された画像がユーザによって操作されてもよい。なお、外部のカメラによって撮影された画像データが、通信経路を介して端末装置１０に送られ、その画像がＵＩ部１６の表示部に表示されてもよい。この場合も、その画像がユーザによって操作されてもよい。
【００３０】
記憶部２０はハードディスクやメモリ（例えばＳＳＤ等）等の記憶装置である。記憶部２０には、例えば、表示情報管理情報、各種のデータ、各種のプログラム（例えば、ＯＳ（Operating System）、各種のアプリケーションプログラム（アプリケーションソフトウェア）等）、端末装置１０のアドレスを示す情報（端末アドレス情報）、サーバ１２のアドレスを示す情報（サーバアドレス情報）、等が記憶されている。記憶部２０には、他のユーザに紐付くアドレス情報や、他の機器のアドレスを示す情報（デバイスアドレス情報）が記憶されていてもよい。もちろん、それらは別々の記憶装置に記憶されてもよいし、１つの記憶装置に記憶されてもよい。
【００３１】
以下、表示情報管理情報について説明する。
【００３２】
表示情報管理情報は、ＡＲ技術を利用することでＵＩ部１６の表示部に表示される情報を管理するための情報である。表示情報管理情報は、一例として、位置ＡＲ技術に用いられる位置ＡＲ用管理情報と、画像ＡＲ技術に用いられる画像ＡＲ用管理情報を含む。
【００３３】
位置ＡＲ用管理情報は、一例として、位置を示す情報（位置情報）と、その位置に関して表示部に表示される情報（表示情報、コンテンツ情報）との対応付けを示す情報である。つまり、位置に表示情報が対応付けられている。１つの位置情報に、１又は複数の表示情報が対応付けられている。位置情報は、絶対的な位置を示す情報であってもよいし、相対的な位置を示す情報であってもよい。位置情報は、例えば、経度と緯度を示す情報である。高さを示す情報が位置情報に含まれていてもよい。
【００３４】
画像ＡＲ用管理情報は、一例として、対象物を識別するための情報（対象物識別情報）と、その対象物に関して表示部に表示される情報（表示情報）と、の対応付けを示す情報である。つまり、対象物に表示情報が対応付けられている。１つの対象物識別情報に、１又は複数の表示情報が対応付けられている。対象物識別情報は、例えば、対象物の名称やＩＤ、対象物の種類を示す情報、対象物に紐付く画像（対象物画像）、対象物のアドレスを示す情報（対象物アドレス情報）、対象物の形状を示す情報、等である。対象物が設置されている位置を示す情報（位置情報）が、対象物識別情報として用いられてもよい。この場合、位置ＡＲ用管理情報と画像ＡＲ用管理情報は同じ管理情報であるともいえる。
【００３５】
対象物は、例えば、機器、建物（例えば、店舗、ビル、駅、病院、塔、その他の施設等）、その他の物体（例えば、信号機、標識、看板、その他の建造物や工作物等）、道路、動物、等である。
【００３６】
機器は、例えば、画像形成機能を有する画像形成装置、ＰＣ、タブレットＰＣ、スマートフォン、携帯電話、ロボット（人型ロボット、人以外の動物型ロボット、それら以外のロボット等）、プロジェクタ、液晶ディスプレイ等の表示装置、記録装置、再生装置、カメラ等の撮像装置、冷蔵庫、炊飯器、電子レンジ、コーヒーメーカー、掃除機、洗濯機、空調機、照明機器、時計、監視カメラ、自動車、二輪車、航空機（例えば無人航空機（いわゆるドローン））、ゲーム機、各種のセンシング機器（例えば温度センサ、湿度センサ、電圧センサ、電流センサ等）等の装置である。機器は、ユーザに対してアウトプット出力する機器（例えば画像形成装置やＰＣ等）であってもよいし、ユーザに対してアウトプットを出力しない機器（例えばセンシング機器）であってもよい。機器の概念の範疇には機器全般が含まれてもよい。例えば、情報機器、映像機器、音響機器、その他の機器も、第１実施形態に係る機器の範疇に含まれてもよい。
【００３７】
対象物が機器である場合、その機器の型番号や、その機器を管理するための情報（例えば資産管理番号等）が、その機器の対象物識別情報として用いられてもよい。また、対象物が機器である場合、表示情報は、その機器に関する情報として、例えば、その機器が有する機能を示す情報、その機器の状態を示す情報、等を含んでもよい。対象物が店舗である場合、表示情報は、その店舗に関する情報として、例えば、その店舗で販売されている商品に関する情報等を含んでもよい。
【００３８】
対象物画像は、例えば、対象物の外側（例えば機器の筐体や建物全体）を表す画像であってもよいし、対象物の内側（例えば機器の筐体を開けて内部が外から見える状態を表す画像や、建物の内部を表す画像）であってもよいし、対象物がシート等の物体によって覆われている状態を表す画像であってもよい。
【００３９】
例えば、端末装置１０は、位置情報や表示情報や対象物識別情報を取得して表示情報管理情報に登録する。これらの情報は、例えば、インターネット等を利用することで取得されてもよいし、ユーザや管理者等によって入力されてもよい。また、端末装置１０は、任意のタイミング、定期的、又はユーザや管理者等によって指定されたタイミングで、表示情報管理情報を更新してもよい。もちろん、端末装置１０自体が、表示情報管理情報の生成や更新を行わずに、サーバ１２等の外部装置が、表示情報管理情報の生成や更新を行ってもよい。この場合、外部装置によって生成や更新された表示情報管理情報が、外部装置から端末装置１０に送信されて記憶部２０に記憶される。
【００４０】
制御部２２は、端末装置１０の各部の動作を制御する機能を有する。制御部２２は、例えば、通信部１４による通信の制御、ＵＩ部１６の表示部への情報の表示の制御、記憶部２０へのデータの書き込み、記憶部２０からのデータの読み出し、等を行う。また、制御部２２は特定部２４を含む。
【００４１】
特定部２４は、表示情報管理情報を参照することで、ＵＩ部１６の表示部に表示される表示情報を特定する機能を有する。
【００４２】
例えば、位置ＡＲ技術が用いられる場合、特定部２４は、端末装置１０に搭載されているＧＰＳ（Global Positioning System）、無線通信、各種のセンサ等を利用することで、端末装置１０（ユーザ）の現在位置（例えば緯度、経度、高さ等）を示す位置情報を取得し、更に、端末装置１０に搭載されている地磁気センサ（いわゆる電子コンパス）や加速度センサやジャイロセンサ等を利用することで、端末装置１０のカメラ１８（ユーザ）が向いている方位を示す方位情報を取得する。次に、特定部２４は、位置ＡＲ用管理情報を参照することで、端末装置１０（ユーザ）の現在位置（例えば緯度、経度、高さ等）と、各表示情報に対応付けられている位置（例えば緯度、経度、高さ等）と、カメラ１８の向きと、に基づいて、表示部に表示される表示情報を特定すると共に、表示部における表示情報の表示位置を決定する。特定部２４は、例えば、端末装置１０（ユーザ）との間の距離が予め定められた閾値以下となる位置に対応付けられている表示情報を特定する。
【００４３】
画像ＡＲ技術が用いられる場合、特定部２４は、画像ＡＲ技術によって対象物を識別し、画像ＡＲ用管理情報を参照することで、その対象物に対応付けられている表示情報を特定する。マーカ型ＡＲ技術が用いられている場合、特定部２４は、対象物に設けられているマーカに基づいて対象物を識別し、その識別結果を利用することで、その対象物に対応付けられている表示情報を特定する。マーカレス型ＡＲ技術が用いられている場合、特定部２４は、対象物の形状（例えば外観）に基づいて対象物を識別し、その識別結果を利用することで、その対象物に対応付けられている表示情報を特定する。識別された対象物に関する情報が、記憶部２０に記憶されてもよい。
【００４４】
なお、ＡＲ技術を利用せずに対象物が識別されてもよい。例えば、ネットワークに繋がっている機器であれば、ＩＰアドレスに基づいて機器が識別されてもよいし、機器ＩＤが読み出されて機器が識別されてもよい。更に、機器が、赤外線通信、可視光通信、Ｗｉ−Ｆｉ、ブルートゥースといった各種無線通信機能を有している場合、無線通信機能を利用することで機器のＩＤが取得されて機器が識別されてもよい。
【００４５】
制御部２２は、特定部２４によって特定された表示情報をＵＩ部１６の表示部に表示させる。このとき、制御部２２は、複数の表示情報に含まれる各表示情報の一部又は全部が表示部に表示されるように、複数の表示情報の表示形態を制御する。つまり、制御部２２は、各表示情報が少なくとも部分的に表示部に表示されるように、複数の表示情報の表示形態を制御する。また、制御部２２は、その表示情報を音声情報として出力してもよい。この場合、その表示情報がスピーカから音声として発せされる。
【００４６】
以下、図３を参照して、サーバ１２の構成について詳しく説明する。図３には、サーバ１２の構成が示されている。
【００４７】
通信部２６は通信インターフェースであり、他の装置にデータを送信する機能、及び、他の装置からデータを受信する機能を有する。通信部２６は、無線通信機能を有する通信インターフェースであってもよいし、有線通信機能を有する通信インターフェースであってもよい。
【００４８】
記憶部２８はハードディスクやメモリ（例えばＳＳＤ等）等の記憶装置である。記憶部２８には、例えば、表示情報管理情報、各種のデータ、各種のプログラム、端末装置１０の端末アドレス情報、サーバ１２のサーバアドレス情報、等が記憶されている。記憶部２８には、各ユーザに紐付くアドレス情報、機器のデバイスアドレス情報、識別処理によって識別された対象物に関する情報、等が記憶されていてもよい。もちろん、それらは別々の記憶装置に記憶されてもよいし、１つの記憶装置に記憶されてもよい。
【００４９】
記憶部２８に記憶されている表示情報管理情報は、端末装置１０の記憶部２０に記憶されている表示情報管理情報と同じ情報である。
【００５０】
制御部３０は、サーバ１２の各部の動作を制御する機能を有する。制御部３０は、例えば、通信部２６による通信の制御、記憶部２８へのデータの書き込み、記憶部２８からのデータの読み出し、等を行う。また、制御部３０は特定部３２を含む。特定部３２は、端末装置１０の特定部２４と同じ機能を有する。
【００５１】
表示情報管理情報は、端末装置１０の記憶部２０に記憶されていてもよいし、サーバ１２の記憶部２８に記憶されていてもよい。端末装置１０の記憶部２０に表示情報管理情報が記憶されている場合、表示情報管理情報は、サーバ１２の記憶部２８に記憶されていなくてもよい。サーバ１２の記憶部２８に表示情報管理情報が記憶されている場合、表示情報管理情報は、端末装置１０の記憶部２０に記憶されていなくてもよい。
【００５２】
また、端末装置１０に特定部２４が設けられている場合、特定部３２はサーバ１２に設けられていなくてもよい。同様に、サーバ１２に特定部３２が設けられている場合、特定部２４は端末装置１０に設けられていなくてもよい。
【００５３】
特定部による処理は、端末装置１０によって行われてもよいし、サーバ１２によって行われてもよい。例えば、端末装置１０に特定部２４が設けられている場合において、表示情報管理情報が端末装置１０の記憶部２０に記憶されておらず、サーバ１２の記憶部２８に記憶されている場合、端末装置１０の特定部２４は、通信経路Ｎを介してサーバ１２にアクセスし、サーバ１２に記憶されている表示情報管理情報を参照する。表示情報管理情報が端末装置１０の記憶部２０とサーバ１２の記憶部２８の両方に記憶されている場合、端末装置１０の特定部２４は、予め定められた表示情報管理情報を参照する。もちろん、表示情報管理情報がサーバ１２の記憶部２８に記憶されておらず、端末装置１０の記憶部２０に記憶されている場合、端末装置１０の特定部２４は、自装置の記憶部２０に記憶されている表示情報管理情報を参照する。サーバ１２の特定部３２が処理を実行する場合も同様である。
【００５４】
以下、図４を参照して、対象物識別情報の取得処理について説明する。図４には、機器の一例としての画像形成装置３４の外観が模式的に示されている。画像形成装置３４は、例えば、プリント機能、スキャン機能、コピー機能及びファクシミリ機能の中の少なくとも１つの機能を有する機器である。ここでは、マーカ型ＡＲ技術を利用することで、画像形成装置３４の対象物識別情報としてのデバイス識別情報を取得するための処理について説明する。画像形成装置３４の筐体には、２次元バーコード等のマーカ３６が設けられている。マーカ３６は、画像形成装置３４のデバイス識別情報がコード化された情報である。ユーザが、端末装置１０に設けられているカメラ１８によってマーカ３６を撮影すると、マーカ３６を表す画像データが生成される。端末装置１０の特定部２４は、当該画像データに表されたマーカ画像に対してデコード処理を適用することでデバイス識別情報を抽出する。これにより、画像形成装置３４が識別される。次に、特定部２４は、画像ＡＲ用管理情報を参照することで、抽出されたデバイス識別情報（対象物識別情報）に対応付けられている表示情報を特定する。端末装置１０の制御部２２は、ＵＩ部１６の表示部にその表示情報を表示させる。例えば、画像ＡＲ用管理情報において、画像形成装置３４のデバイス識別情報には、表示情報の一例として、画像形成装置３４の状態を示す情報、画像形成装置３４が有する機能を示す情報、等が対応付けられており、それらの情報がＵＩ部１６の表示部に表示される。
【００５５】
なお、サーバ１２の特定部３２が、マーカ３６を表す画像データに対してデコード処理を適用することで、デバイス識別情報を抽出してもよい。この場合、画像データが端末装置１０からサーバ１２に送信され、サーバ１２において当該画像データに対してデコード処理が適用される。また、サーバ１２の特定部３２が表示情報を特定してもよい。この場合、その表示情報がサーバ１２から端末装置１０に送信され、ＵＩ部１６の表示部に表示される。
【００５６】
マーカ３６は、画像形成装置３４に関する情報（例えば、画像形成装置３４が有する機能を示す情報等）がコード化されて含まれていてもよい。この場合、マーカ３６を表す画像データにデコード処理を適用することで、画像形成装置３４のデバイス識別情報が抽出されると共に、画像形成装置３４が有する機能を示す情報も抽出される。
【００５７】
マーカレス型ＡＲ技術を適用することでデバイス識別情報を取得する場合、例えば、ユーザはカメラ１８によって、対象物（例えば画像形成装置３４）の外観の全部又は一部を撮影する。もちろん、画像形成装置３４の名称（例えば商品名）や型番号や資産管理番号といった対象物を特定するための情報を、撮影によって得ることは役に立つ。撮影によって、画像形成装置３４の外観の全部又は一部を表す外観画像データが生成される。端末装置１０の特定部２４は、当該外観画像データに基づいて画像形成装置３４を識別する。例えば、端末装置１０の記憶部２０には、対象物毎に、対象物の外観の全部又は一部を表す外観画像データと、当該対象物の対象物識別情報と、の対応付けを示す外観画像対応付け情報が記憶されている。特定部２４は、撮影によって生成された外観画像データと外観画像対応付け情報に含まれる各外観画像データとを比較し、その比較結果に基づいて、画像形成装置３４の対象物識別情報を特定する。例えば、特定部２４は、撮影によって生成された外観画像データから画像形成装置３４の外観の特徴を抽出し、外観画像対応付け情報に含まれる外観画像データ群において、その外観の特徴と同一又は類似の特徴を表す外観画像データを特定し、その外観画像データに対応付けられている対象物識別情報を特定する。これにより、カメラ１８によって撮影された画像形成装置３４が識別される。画像形成装置３４の名称（例えば商品名）や型番号等が撮影され、名称や型番号等を表す外観画像データが生成されている場合、その外観画像データに表されている名称や型番号等に基づいて、画像形成装置３４が識別されてもよい。特定部２４は、画像ＡＲ用管理情報を参照することで、対象物識別情報に対応付けられている表示情報を特定する。外観画像データが対象物識別情報として用いられている場合、つまり、画像ＡＲ用管理情報において、対象物識別情報としての外観画像データと表示情報とが対応付けられている場合、特定部２４は、画像ＡＲ用管理情報を参照することで、撮影によって生成された外観画像データに対応付けられている表示情報を特定してもよい。端末装置１０の制御部２２は、その表示情報をＵＩ部１６の表示部に表示させる。
【００５８】
なお、サーバ１２の特定部３２が、撮影によって生成された外観画像データと外観画像対応付け情報に含まれる各外観画像データとを比較することで、対象物を識別し、更に、対象物に対応付けられている表示情報を特定してもよい。この場合、その表示情報はサーバ１２から端末装置１０に送信され、ＵＩ部１６の表示部に表示される。
【００５９】
位置ＡＲ技術が利用される場合、端末装置１０の特定部２４は、ＧＰＳ、無線通信、各種のセンサ等を利用することで、端末装置１０（ユーザ）の現在位置（例えば緯度、経度、高さ等）を特定し、更に、地磁気センサや加速度センサやジャイロセンサ等を利用することで、カメラ１８（ユーザ）が向いている方位を特定する。次に、特定部２４は、位置ＡＲ用情報管理情報を参照することで、端末装置１０（ユーザ）の現在位置と、各表示情報に対応付けられている位置と、カメラ１８の向きと、に基づいて、表示部に表示される表示情報を特定すると共に、表示情報の表示位置を特定する。例えば、端末装置１０と画像形成装置３４との間の距離が閾値以下であり、カメラ１８が画像形成装置３４に向けられている場合、特定部２４は、位置ＡＲ用管理情報において、画像形成装置３４の設置位置に対応付けられている表示情報を特定する。端末装置１０の制御部２２は、その表示情報をＵＩ部１６の表示部に表示させる。
【００６０】
なお、サーバ１２の特定部３２が、端末装置１０の現在位置と、各表示情報に対応付けられている位置と、カメラ１８の向きと、に基づいて、表示部に表示される表示情報を特定してもよい。この場合、その表示情報はサーバ１２から端末装置１０に送信され、ＵＩ部１６の表示部に表示される。
【００６１】
複数の識別技術を用いることで対象物を識別してもよいし、表示情報を特定してもよい。例えば、マーカ型ＡＲ技術、マーカレス型ＡＲ技術、及び、位置ＡＲ技術の中から選択された複数のＡＲ技術を用いることで対象物を識別してもよいし、表示情報を特定してもよい。また、あるＡＲ技術によって対象物を識別することができない場合や、表示情報を特定することができない場合、他のＡＲ技術を用いて対象物の識別や表示情報の特定を行ってもよい。例えば、マーカ型ＡＲ技術やマーカレス型ＡＲ技術によって対象物を識別することができず、表示情報を特定することができない場合、位置ＡＲ技術を用いることで表示情報を特定してもよい。
【００６２】
以下、端末装置１０の動作について具体例を挙げて詳しく説明する。
【００６３】
（具体例１）
図５を参照して、具体例１について説明する。図５には、端末装置１０に表示される画面の一例が示されている。端末装置１０の制御部２２は、ＵＩ部１６の表示部に画面３８を表示させる。
【００６４】
画面３８には、ＡＲ技術によって特定された表示情報が表示される。例えば、カメラ１８によって画像形成装置３４が撮影されている場合、制御部２２は、画像形成装置３４に紐付く画像４０を画面３８に表示させる。
【００６５】
位置ＡＲ技術が用いられている場合において、カメラ１８が画像形成装置３４に向けられており、端末装置１０と画像形成装置３４との間の距離が閾値以下である場合、端末装置１０の特定部２４は、位置ＡＲ用管理情報において、画像形成装置３４の設置位置に対応付けられている表示情報４２，４４を特定する。
【００６６】
画像形成装置３４に設けられているマーカ３６がカメラ１８によって撮影され、マーカ型ＡＲ技術が適用された場合、特定部２４は、画像ＡＲ用管理情報において、画像形成装置３４のデバイス識別情報（対象物識別情報）に対応付けられている表示情報４２，４４を特定する。画像形成装置３４の一部又は全部がカメラ１８によって撮影され、マーカレス型ＡＲ技術が適用された場合も同様である。
【００６７】
制御部２２は、表示情報４２，４４を画面３８に表示させる。表示情報４２，４４は、一例として画像形成装置３４の状態を示す情報である。具体的には、表示情報４２は、画像形成装置３４に搭載されているトナーが不足している状態を示す情報であり、表示情報４４は、画像形成装置３４に収容されている用紙が不足している状態を示す情報である。もちろん、画像形成装置３４の設置位置には、画像形成装置３４の機能を示す表示情報が対応付けられて、その機能を示す表示情報が画面３８に表示されてもよい。
【００６８】
画像４０は、画像形成装置３４をカメラ１８によって撮影することで生成された撮影画像（例えば写真や動画像中の１フレーム等）であってもよいし、画像形成装置３４を模式的に表す画像（例えばアイコン）であってもよい。
【００６９】
制御部２２は、各表示情報の一部又は全部が画面３８に表示されるように、各表示情報の表示形態を制御する。図５に示す例では、制御部２２は、表示情報４２の一部又は全部が画面３８に表示されると共に、表示情報４４の一部又は全部が画面３８に表示されるように、表示情報４２，４４の表示態様を制御する。制御部２２は、表示情報４２と表示情報４４とが互いに全く重ならないように表示情報４２，４４を画面３８に表示させてもよいし、表示情報４２と表示情報４４とが互いに部分的に重なるように表示情報４２，４４を画面３８に表示させてもよい。つまり、端末装置１０の制御部２２は、ある表示情報が他の表示情報によって完全に覆われてユーザから見えない状態にならないように、複数の表示情報の表示態様を制御する。
【００７０】
例えば、表示情報４２，４４はそれぞれ、予め定められた表示領域内に表示される。つまり、１つの表示情報に対して１つの表示領域が用いられ、各表示情報は別々の表示領域内に表示される。各表示領域の一部又は全部が画面３８に表示されるように、各表示領域の表示態様が制御される。
【００７１】
また、制御部２２は、表示情報４２，４４を、画像４０に紐付けて画面３８に表示させる。例えば、制御部２２は、画像４０上に部分的に表示情報４２，４４を重ねて表示させる。図５に示す例では、表示情報４２，４４はそれぞれ、画像４０に繋がっている吹き出し状の形状を有する表示領域内に表示されており、各表示領域は画像４０上に部分的に重ねて表示されている。なお、その形状は一例に過ぎず、他の形状が用いられてもよい。また、表示領域の境界自体は表示されずに、表示情報が示す文字列のみが表示されてもよい。
【００７２】
制御部２２は、表示情報４２，４４のそれぞれの表示位置、各表示領域の形状や大きさ、各表示領域内に表示される文字列の表示サイズ、等を調整することで、表示情報４２，４４のそれぞれの一部又は全部を画面３８に表示させる。例えば、制御部２２は、表示情報（例えば表示情報４２）が示す文字の数が多いほど、より大きな表示領域内にその表示情報を表示させる。このとき、他の表示情報（例えば表示情報４４）の全部が、そのより大きな表示領域によって覆われてしまう場合、端末装置１０の制御部２２は、当該他の表示情報（表示情報４４）の少なくとも一部が覆われずに表示されるように、表示情報４２が示す文字の表示サイズを小さくし、表示情報４２を、より小さな表示領域内に表示させる。こうすることで、各表示情報の少なくとも一部が画面３８に表示される。
【００７３】
図５に示す例では、表示情報４２上に表示情報４４が部分的に重ねて表示されている。つまり、表示情報４２よりも前面側に表示情報４４が表示されている。この場合において、ユーザがＵＩ部１６を操作して表示情報４２を指定した場合（例えば、画面３８上で表示情報４２を押した場合）、制御部２２は、表示情報４４よりも前面側に表示情報４２を表示させる。こうすることで、ユーザが指定した表示情報が他の表示情報に覆われずに表示される。
【００７４】
また、表示情報がユーザによって指定された場合、制御部２２は、その表示情報に関するより詳細な情報を画面３８に表示させてもよい。例えば、ユーザによって表示情報４４（紙切れを示す情報）が指定された場合、制御部２２は、例えば、補充すべき用紙のサイズやトレーを示す情報等を、より詳細な情報として、画面３８に表示させる。例えば、制御部２２は、最前面に表示されている表示情報がユーザによって指定された場合、その表示情報に関してより詳細な情報を画面３８に表示させてもよい。別の例として、制御部２２は、表示情報が最前面に表示されているか否かに関わらず、予め定められた時間以上にわたって表示情報がユーザによって指定された場合（いわゆる長押しが行われた場合）、その表示情報に関してより詳細な情報を画面３８に表示させてもよい。制御部２２は、対象物（例えば画像形成装置）やサーバ１２等から詳細な情報を取得する。
【００７５】
なお、１つの表示領域（例えば吹き出し状の領域）内に複数の表示情報が表示されてもよい。この場合においても、各表示情報の少なくとも一部が表示されるように、その表示領域内における文字の大きさや配置等が調整される。
【００７６】
図５に示す例では、１つの対象物（例えば画像形成装置３４）に関する表示情報が表示されているが、複数の対象物が識別された場合、当該複数の対象物のそれぞれに関する表示情報が画面３８に表示される。当該複数の対象物は、互いに同一の種類の対象物であってもよいし、互いに異なる種類の対象物であってもよい。例えば、マーカ型ＡＲ技術が適用されて、画像形成装置３４とＰＣが対象物として識別された場合、制御部２２は、画像形成装置３４に対応付けられている表示情報（例えば表示情報４２，４４）と、ＰＣに対応付けられている表示情報を、画面３８に表示させる。また、マーカ型ＡＲ技術によって画像形成装置３４が識別されて画像形成装置３４に対応付けられている表示情報が特定され、更に、位置ＡＲ技術によって周辺の建物等に対応付けられている表示情報が特定された場合、制御部２２は、画像形成装置３４に対応付けられている表示情報と、周辺の建物等に対応付けられている表示情報を画面３８に表示させる。このような場合においても、制御部２２は、各表示情報の少なくとも一部が画面３８に表示されるように、各表示情報の表示態様を制御する。
【００７７】
以上のように具体例１によれば、各表示情報が他の表示情報や画像によって完全に覆われずに表示されるので、各表示情報の少なくとも一部がユーザに提供される。
【００７８】
制御部２２は、表示情報をＵＩ部１６の表示部に表示させると共に、その表示情報を音声情報として出力してもよい。例えば、スピーカからその音声情報に基づく音声が発せられる。
【００７９】
なお、対象物の部分毎に表示情報が対応付けられていてもよい。その対応付けは表示情報管理情報に登録されている。この場合、特定部２４は、画像ＡＲ技術によって対象物の部分が識別し、その部分に対応付けられている表示情報を特定する。制御部２２は、その部分に紐付く画像に対応付けてその表示情報を画面３８に表示させる。例えば、画像形成装置３４が、本体、自動原稿送り装置及び後処理装置を含み、本体には、例えばプリント機能を示す表示情報が対応付けられており、自動原稿送り装置には、スキャン機能を示す表示情報が対応付けられており、後処理装置には、ステープル機能を示す表示情報が対応付けられているものとする。画像形成装置３４の本体が画像ＡＲ技術によって識別された場合、特定部２４は、本体に対応付けられている表示情報（プリント機能を示す情報）を特定し、制御部２２は、その表示情報を画面３８に表示させる。このように、部分毎に表示情報を対応付けることで、同じ対象物が撮影された場合であっても、識別された部分毎に異なる表示情報をユーザに提供することができる。
【００８０】
（具体例２）
図６を参照して、具体例２について説明する。図６には、画面が示されている。例えば、表示情報４６が表示情報４２，４４によって完全に覆われて、表示情報４６の全部が表示されていない場合、端末装置１０の制御部２２は、表示情報４２，４４，４６のそれぞれの表示位置をずらすことで、表示情報４２，４４，４６のそれぞれの少なくとも一部を画面３８に表示させる。なお、表示情報４６は、画像形成装置３４がファクシミリ受信中であることを示す情報である。
【００８１】
例えば、画像形成装置３４がファクシミリ受信を行っていない場合、図５に示すように、制御部２２は、表示情報４２，４４を画面３８に表示させる。この状態で、画像形成装置３４がファクシミリ受信を開始した場合、端末装置１０の特定部２４は、画像形成装置３４の状態を示す表示情報としてファクシミリ受信を示す表示情報４６を取得し、制御部２２は、表示情報４２，４４に加えて表示情報４６を画面３８に表示させる。なお、画像形成装置３４の状態を示す表示情報４６は、表示情報管理情報に登録されており、特定部２４は、表示情報管理情報から表示情報４６を取得する。制御部２２は、表示情報４２，４４，４６のそれぞれの少なくとも一部が画面３８に表示されるように、表示情報４２，４４，４６の表示位置を調整する。もちろん、制御部２２は、表示情報４２，４４，４６のそれぞれの少なくとも一部が画面３８に表示されるように、各表示情報が示す文字の表示サイズを調整してもよい。
【００８２】
以上のように各表示情報の表示位置をずらして表示することで、各表示情報が他の表示情報や画像によって完全に覆われずに表示される。
【００８３】
具体例２においても、ユーザがＵＩ部１６を操作して表示情報を指定した場合、制御部２２は、ユーザによって指定された表示情報を他の表示情報よりも前面側に表示させる。例えば、表示情報４４の一部が表示情報４６によって覆われているが、ユーザが表示情報４４を指定した場合、表示情報４４が他の表示情報よりも前面側に表示される。つまり、表示情報４４が他の表示情報に覆われずに表示される。
【００８４】
（具体例３）
図７を参照して、具体例３について説明する。図７には、画面が示されている。図７に示す例では、端末装置１０の制御部２２は、１つの表示情報（例えば表示情報４２）の全部を画面３８に表示させ、他の表示情報（例えば表示情報４４，４６）の一部が画面３８に表示されるように、表示情報４２よりも背面側に表示させる。つまり、制御部２２は、表示情報４２，４４上に表示情報４２を重ねると共に、表示情報４４，４６のそれぞれの一部が画面３８に表示されるように、各表示情報の表示位置をずらして表示情報４２，４４，４６を画面３８に表示させる。より詳しく説明すると、表示情報４６の一部が表示されるように、表示情報４６上に表示情報４４が重ねて表示され、更に、表示情報４４の一部が表示されるように、表示情報４４上に表示情報４２が重ねて表示されている。このように、表示位置を徐々に変えながら複数の表示情報が重ねて表示されている。
【００８５】
例えば、ユーザがＵＩ部１６を操作して、最前面に表示されている表示情報（例えば表示情報４２）を指定した場合、制御部２２は、表示情報４２の１つ下に表示されている表示情報４４を最前面に表示させ、表示情報４２を、表示情報４６の下に表示させる。同様に、ユーザが、最前面に表示されている表示情報４４を指定した場合、の制御部２２は、表示情報４４の１つ下に表示されている表示情報４６を最前面に表示させる。こうすることで、各表示情報がユーザに提供されると共に、簡易な操作によって、特定の表示情報の全部がユーザに提供される。なお、ユーザが、最前面に表示されている表示情報を予め定められた時間以上にわたって指定した場合、制御部２２は、その表示情報に関して詳細な情報を画面３８に表示させてもよい。
【００８６】
具体例１から具体例３において、制御部２２は、各表示情報の優先度に応じて表示態様を変えてもよい。例えば、制御部２２は、優先度の高い表示情報ほど前面側に表示させる。図６に示す例において、表示情報４２の優先度が最も高く（１番であり）、表示情報４４の優先度が２番であり、表示情報４６の優先度が３番であるとする。この場合、制御部２２は、表示情報４２を最前面に表示させ、表示情報４４の一部が表示情報４２によって覆われるように表示情報４２の下に表示させ、表示情報４６の一部が表示情報４２，４４によって覆われるように表示情報４４の下に表示情報４６を表示させる。
【００８７】
優先度は、例えば、ユーザによって定められてもよいし、各表示情報の表示履歴に基づいて定められてもよいし、緊急度に基づいて定められてもよい。例えば、予め定められた期間内での表示回数が多い表示情報ほど、高い優先度が与えられてもよい。また、予め定められた期間内で、ユーザによって指定された回数が多い表示情報ほど、高い優先度が与えられてもよい。また、予め定められた緊急イベントが発生した場合（例えば、機器が故障した場合等）には、その旨を示す表示情報の優先度が最も高くなってもよい。
【００８８】
以上のように、優先度の高い表示情報を優先度の低い表示情報上に重畳して表示することで、優先度の高い表示情報が優先度の低い表示情報と比べて、より目立つ表示態様でユーザに提供される。
【００８９】
（具体例４）
図８を参照して、具体例４について説明する。図８には、画面が示されている。図８に示す例では、端末装置１０の制御部２２は、各表示情報（例えば表示情報４２，４４，４６）が互いに重ならないように、各表示情報（例えば表示情報４２，４４，４６）を画面３８に表示させる。制御部２２は、各表示領域の表示位置や、各表示情報が示す文字の表示サイズや、表示領域の形状や大きさを調整することで、各表示情報が互いに重ならないように各表示情報を画面３８に表示させる。こうすることで、各表示情報の全部がユーザに提供される。
【００９０】
（具体例５）
図９及び図１０を参照して、具体例５について説明する。図９には、画像形成装置３４と人４８が模式的に示されている。図１０には、画面が示されている。端末装置１０の制御部２２は、表示情報の表示中に、新たな画像が画面３８に追加して表示された場合、当該新たな画像よりも前面側に表示情報を表示させる。例えば図９に示すように、画像形成装置３４と端末装置１０との間に人４８（障害物の一例）が存在し、カメラ１８によって、画像形成装置３４と共に人４８が撮影されたものとする。この場合において、人４８に対応付けられている表示情報が表示情報管理情報に登録されていない場合、制御部２２は、図１０に示すように、人４８に紐付く画像５０よりも前面側に、画像形成装置３４に対応付けられている表示情報４２，４４，４６を表示させる。すなわち、制御部２２は、画像５０上に表示情報４２，４４，４６を重畳して表示する。
【００９１】
以上のように、表示情報を、その表示情報に関連しない他の画像よりも前面側に表示することで、他の画像が表示されている場合であっても、表示情報が他の画像によって遮られずにユーザに提供される。
【００９２】
なお、人４８に対応付けられている表示情報が表示情報管理情報に登録されている場合、制御部２２は、その表示情報を画面３８に表示させる。この場合、制御部２２は、その表示情報と表示情報４２，４４，４６のそれぞれの少なくとも一部が画面３８に表示されるように、各表示情報の表示態様を制御する。
【００９３】
（具体例６）
図１１及び図１２を参照して、具体例６について説明する。図１１及び図１２には、画面が示されている。例えば、画像形成装置とＰＣがカメラ１８によって撮影されており、画像ＡＲ技術又は位置ＡＲ技術によって、画像形成装置（又は画像形成装置の設置位置）に対応付けられている表示情報と、ＰＣ（又はＰＣの設置位置）に対応付けられている表示情報が特定されている。また、図１１に示すように、画像形成装置に紐付く画像４０とＰＣに紐付く画像５２が、画面３８に表示されている。なお、画像５２は、ＰＣをカメラ１８によって撮影することで生成された撮影画像（例えば写真や動画像中の１フレーム等）であってもよいし、ＰＣを模式的に表す画像（例えばアイコン）であってもよい。
【００９４】
具体例６では、複数の表示情報の中の特定物に関する表示情報がＵＩ部１６の表示部に表示される。特定物は、例えば、ユーザによって指定された対象物であってもよいし、予め定められていてもよい。ここでは、画像形成装置が特定物として指定されているものとする。この場合、図１２に示すように、制御部２２は、ＰＣに対応付けられている表示情報を画面３８に表示させずに、画像形成装置に対応付けられている表示情報４２，４４，４６を画面３８に表示させる。こうすることで、特定物以外の対象物に関する表示情報が表示されないので、特定物以外の対象物に関する表示情報をも表示する場合と比べて、特定物に関する表示情報がより見易い状態でユーザに提供される。
【００９５】
具体例６においても、上記の具体例１から具体例５と同様に、端末装置１０の制御部２２は、特定物としての画像形成装置に対応付けられている表示情報４２，４４，４６を、画像形成装置に紐付く画像４０上に部分的に重ねて表示させ、表示情報４２，４４，４６のそれぞれの一部又は全部が画面３８に表示されるように、表示情報４２，４４，４６の表示態様を制御する。図１２に示す例では、図８に示す例と同様に、各表示情報の全部が画面３８に表示されている。もちろん、図５から図７に示す例と同様に、各表示情報が互いに部分的に重ねて表示されることで、各表示情報の一部が画面３８に表示されてもよい。
【００９６】
なお、ユーザによって特定物が変更されてもよい。例えば、画像形成装置に関する表示情報４２，４４，４６が画面３８に表示されている場合において、ユーザがＵＩ部１６を操作して、ＰＣに紐付く画像５２を指定した場合、制御部２２は、ＰＣを特定物として識別し、表示情報４２，４４，４６を表示せずに、ＰＣに対応付けられている表示情報を画面３８に表示させる。
【００９７】
また、複数の特定物が定められてもよい。例えば、特定物を選択するためのモードが実行され、ユーザが複数の対象物を指定した場合、当該複数の対象物が特定物として識別される。例えば、画像形成装置とＰＣがユーザに指定された場合、画像形成装置とＰＣが特定物として識別され、画像形成装置に対応付けられている表示情報４２，４４，４６とＰＣに対応付けられている表示情報が画面３８に表示される。
【００９８】
（具体例７）
具体例７では、端末装置１０の制御部２２は、カメラ１８の焦点が定まっている箇所（焦点が合っている箇所）に対応付けられている表示情報をＵＩ部１６の表示部に表示させる。例えば、図１１に示す例において、画像形成装置に焦点が定まっており、ＰＣに焦点が定まっていない場合、制御部２２は、図１２に示すように、ＰＣに対応付けられている表示情報を画面３８に表示させずに、画像形成装置に対応付けられている表示情報４２，４４，４６を画面３８に表示させる。この場合も、制御部２２は、表示情報４２，４４，４６を画像形成装置に紐付く画像４０上に部分的に重ねて表示させ、表示情報４２，４４，４６のそれぞれの一部又は全部が画面３８に表示されるように、表示情報４２，４４，４６の表示態様を制御する。なお、画像形成装置に対応付けられている表示情報は、位置ＡＲ技術又は画像ＡＲ技術によって特定される。カメラ１８の焦点が定まっている箇所は、ユーザが関心を持っている箇所であると推測される。それ故、焦点が定まっていない箇所に対応付けられている表示情報を表示せずに、焦点が定まっている箇所に対応付けられている表示情報を表示することで、ユーザが関心を持っていると推測される箇所に関する表示情報がユーザに提供される。
【００９９】
（具体例８）
図１３から図１６を参照して、具体例８について説明する。図１３から図１６には、画面が示されている。例えば、画像形成装置とＰＣがカメラ１８によって撮影されており、画像ＡＲ技術又は位置ＡＲ技術によって、画像形成装置（又は画像形成装置の設置位置）に対応付けられている表示情報と、ＰＣ（又はＰＣの設置位置）に対応付けられている表示情報が特定されている。また、図１３に示すように、画像形成装置に紐付く画像４０とＰＣに紐付く画像５２が、画面３８に表示されている。
【０１００】
具体例８では、端末装置１０の制御部２２は、複数の対象物が画面３８に表されている場合に、各対象物に紐付く画像の大小関係に応じて、各表示情報の表示態様を変える。例えば、制御部２２は、より大きな画像に紐付く対象物に関する表示情報を、より小さな画像に紐付く対象物に関する表示情報よりも優先的に画面３８に表示させる。具体的には、制御部２２は、より大きな画像に紐付く対象物に関する表示情報を、より小さな画像に紐付く対象物に関する表示情報よりも前面に表示したり、より大きくして表示したりする。画像の大きさは、例えば、画面３８上にてその画像が占める面積や画素数に基づいて決定される。なお、画像形成装置が第１対象物の一例に相当し、ＰＣが第２対象物の一例に相当する。また、画像４０が第１画像の一例に相当し、画像５２が第２画像の一例に相当する。
【０１０１】
図１３に示す例では、画像５２よりも画像４０が大きいため、制御部２２は、画像５２に紐付くＰＣに関する表示情報と比べて、画像４０に紐付く画像形成装置に関する表示情報を優先的に画面３８に表示させる。例えば図１４に示すように、制御部２２は、ＰＣに対応付けられている表示情報５４，５６よりも、画像形成装置に対応付けられている表示情報４２，４４，４６をより前面側に表示させる。図１４に示す例では、ＰＣに対応付けられている表示情報５４上に、画像形成装置に対応付けられている表示情報４４が部分的に重畳して表示されており、表示情報５４の一部が表示情報４４によって覆われている。また、ＰＣに対応付けられている表示情報５６上に、画像形成装置に対応付けられている表示情報４２，４６が部分的に重畳して表示されており、表示情報５６の一部が表示情報４２，４６によって覆われている。
【０１０２】
また、制御部２２は、表示情報４２，４４，４６が示す文字列の表示サイズを、表示情報５４，５６が示す文字列の表示サイズよりも大きくして表示してもよいし、表示情報４２，４４，４６の表示領域のサイズを、表示情報５４，５６の表示領域のサイズよりも大きくしてもよい。
【０１０３】
具体例８においても、制御部２２は、各表示情報の少なくとも一部が表示されるように、各表示情報の表示形態を制御する。図１４に示す例では、画像形成装置に対応付けられている表示情報４２，４４，４６のそれぞれの全部が画面３８に表示され、ＰＣに対応付けられている表示情報５４，５６が表示情報４２，４４，４６によって部分的に覆われて表示されている。もちろん、表示情報４２，４４，４６が互いに部分的に重ねて表示されてもよい。
【０１０４】
図１５には別の例が示されている。図１５に示す例では、画像４０よりも画像５２が大きいため、制御部２２は、画像４０に紐付く画像形成装置に関する表示情報と比べて、画像５２に紐付くＰＣに関する表示情報を優先的に画面３８に表示させる。例えば図１６に示すように、制御部２２は、画像形成装置に対応付けられている表示情報４２，４４，４６よりも、ＰＣに対応付けられている表示情報５４，５６をより前面側に表示させる。図１６に示す例では、画像形成装置に対応付けられている表示情報４４上に、ＰＣに対応付けられている表示情報５４が部分的に重畳して表示されており、表示情報４４の一部が表示情報５４によって覆われている。また、画像形成装置に対応付けられている表示情報４２，４６上に、ＰＣに対応付けられている表示情報５６が部分的に重畳して表示されており、表示情報４２，４６のそれぞれの一部が表示情報５６によって覆われている。
【０１０５】
また、制御部２２は、表示情報５４，５６が示す文字列の表示サイズを、表示情報４２，４４，４６が示す文字列の表示サイズよりも大きくして表示してもよいし、表示情報５４，５６の表示領域のサイズを、表示情報４２，４４，４６の表示領域のサイズよりも大きくしてもよい。
【０１０６】
また、図１６に示す例では、ＰＣに対応付けられている表示情報５４，５６のそれぞれの全部が画面３８に表示され、画像形成装置に対応付けられている表示情報４２，４４，４６が表示情報５４，５６によって部分的に覆われて表示されている。もちろん、表示情報５４，５６が互いに部分的に重ねて表示されてもよい。
【０１０７】
ユーザがＵＩ部１６を操作することで、画面３８に表示されている画像の大きさを変更してもよい。この場合、その変更に応じて、表示情報の表示態様が制御される。例えば、図１５に示す例において、ユーザがＵＩ部１６を操作することで、画像形成装置に紐付く画像４０をＰＣに紐付く画像５２よりも大きくした場合、制御部２２は、画像形成装置に対応付けられている表示情報をＰＣに対応付けられている表示情報よりも優先的に画面３８に表示させる。こうすることで、簡易な操作によって、ユーザが希望する対象物に関する表示情報が優先的に表示される。
【０１０８】
なお、具体例６と具体例８とを組み合わせてもよい。例えば、制御部２２は、最大の画像に紐付く対象物を特定物として識別し、その特定物以外の対象物に対応付けられている表示情報を画面３８に表示させずに、その特定物に対応付けられている表示情報を画面３８に表示させてもよい。
【０１０９】
（具体例９）
具体例９では、端末装置１０の制御部２２は、ユーザ（端末装置１０）と各対象物との間の位置関係に応じて、表示情報の表示態様を変える。例えば、制御部２２は、ユーザからより遠い対象物に対応付けられている表示情報と比べて、ユーザにより近い対象物に対応付けられている表示情報を優先的に画面３８に表示させる。
【０１１０】
例えば、ユーザと画像形成装置との間の距離が、ユーザとＰＣとの間の距離よりも短い場合、図１４に示すように、制御部２２は、ＰＣに対応付けられている表示情報５４，５６よりも画像形成装置に対応付けられている表示情報４２，４４，４６をより前面側に表示させる。一方、ユーザとＰＣとの間の距離が、ユーザと画像形成装置との間の距離よりも短い場合、図１６に示すように、制御部２２は、画像形成装置に対応付けられている表示情報４２，４４，４６よりもＰＣに対応付けられている表示情報５４，５６をより前面側に表示させる。
【０１１１】
また、制御部２２は、ユーザにより近い対象物に対応付けられている表示情報が示す文字列の表示サイズを、ユーザからより遠い対象物に対応付けられている表示情報が示す文字列の表示サイズよりも大きくして表示してもよいし、ユーザにより近い対象物に対応付けられている表示情報の表示領域のサイズを、ユーザからより遠い対象物に対応付けられている表示情報の表示領域のサイズよりも大きくしてもよい。
【０１１２】
具体例９によれば、ユーザにより近い対象物に対応付けられている表示情報が、より目立つ表示態様でユーザに提供される。
【０１１３】
（具体例１０）
図１７を参照して、具体例１０について説明する。図１７には、画面が示されている。例えば、画像ＡＲ技術又は位置ＡＲ技術によって、店舗（又は店舗の位置）に対応付けられている表示情報が特定されている。また、図１７に示すように、店舗に紐付く画像５８が画面３８に表示されている。
【０１１４】
端末装置１０の制御部２２は、店舗に対応付けられている表示情報６０，６２を画面３８に表示させる。表示情報６０は、店名を示す情報であり、表示情報６２は、当該店舗で提供されているメニューを示す情報である。例えば、ユーザがＵＩ部１６を操作して表示情報６０を指定すると、制御部２２は、連絡先や地図等の詳細な情報を画面３８に表示させる。また、ユーザがＵＩ部１６を操作して表示情報６２を指定すると、制御部２２は、メニューの詳細な情報を画面３８に表示させる。図１７に示す例では、図８に示す例と同様に、表示情報６０，６２のそれぞれの全部が画面３８に表示されている。
【０１１５】
具体例１０では、制御部２２は、対象物（例えば店舗）に関する情報（関連情報）を、１又は複数のアプリケーション（ソフトウェア）によって取得し、その関連情報を表示情報として画面３８に表示させる。例えば、制御部２２は、インターネットを利用することで対象物に関する情報を取得してもよいし、ＳＮＳ（ソーシャルネットワーキングサービス）を利用することで対象物に関する情報を取得してもよい。
【０１１６】
図１７に示す例では、制御部２２は、店舗についての関連情報を取得する。例えば、制御部２２は、Ｗｅｂブラウザを利用することで、当該店舗に関連するインターネット上のＷｅｂサイトを検索し、そのＷｅｂサイトから当該店舗についての関連情報（例えば、店舗についての他のユーザのコメント（評判、いわゆる口コミ）等）を取得してもよい。また、制御部２２は、ＳＮＳアプリケーションを利用することで、ＳＮＳにおいて当該店舗に関する関連情報（例えば他のユーザのコメント等）を取得してもよい。
【０１１７】
制御部２２は、アプリケーション毎に関連情報を取得し、関連情報を表示情報として画面３８に表示させる。表示情報群６４は、あるＷｅｂサイトから取得された店舗に関する関連情報群である。表示情報群６６は、ＳＮＳアプリケーションＡを利用することで、ＳＮＳ（ＳＮＳ（Ａ）と称する）から取得された店舗に関する関連情報群である。表示情報群６８は、別のＳＮＳアプリケーションＢを利用することで、別のＳＮＳ（ＳＮＳ（Ｂ））から取得された店舗に関する関連情報群である。表示情報群６４，６６，６８にはそれぞれ、１又は複数の表示情報が含まれている。１つの表示情報には、１つのコメントや評判等を示す情報が含まれている。制御部２２は、表示情報群に含まれる表示情報の数を示す情報を画面３８に表示させてもよい。
【０１１８】
制御部２２は、アプリケーション毎に各関連情報をまとめて画面３８に表示させる。例えば、制御部２２は、表示情報群６４に含まれる各表示情報の表示位置をずらしつつ、各表示情報を互いに部分的に重ねて画面３８に表示させる。ユーザがＵＩ部１６を操作することで、最前面に表示されている表示情報を指定すると、制御部２２は、その表示情報の下に表示されている表示情報を最前面に表示させる。元々最前面に表示されていた表示情報は、最背面に表示される。表示情報群６６，６８についても同様である。
【０１１９】
また、制御部２２は、表示情報群６４に含まれる１つの表示情報のみを代表表示情報として画面３８に表示させてもよい。ユーザがＵＩ部１６を操作することで、その代表表示情報を指定すると、制御部２２は、表示情報群６４に含まれる他の表示情報を代表表示情報として、元々の代表表示情報に換えて画面３８に表示させる。
【０１２０】
なお、制御部２２は、Ｗｅｂサイト毎に関連情報をまとめて画面３８に表示させてもよい。
【０１２１】
具体例１０によれば、対象物に対応付けられている情報以外の関連情報がユーザに提供される。
【０１２２】
（具体例１１）
図１８と図１９を参照して、具体例１１について説明する。図１８と図１９には、画面が示されている。例えば、画像ＡＲ技術又は位置ＡＲ技術によって、店舗（又は店舗の位置）に対応付けられている表示情報が特定されている。また、図１８と図１９に示すように、店舗に紐付く画像５８が画面３８に表示されている。
【０１２３】
具体例１１においては、端末装置１０の制御部２２は、ユーザ（端末装置１０）と対象物との間の位置関係に応じて、表示情報を変えて画面３８に表示させる。例えば、制御部２２は、ユーザと対象物との間の距離が閾値未満の場合、ユーザと対象物との間の距離が閾値以上の場合と比べて、より詳細な情報を表示情報として画面３８に表示させる。閾値は、予め定められた値であり、ユーザや管理者等によって変更されてもよい。
【０１２４】
ユーザと対象物としての店舗との間の距離が閾値以上の場合、図１８に示すように、制御部２２は、店舗に対応付けられている表示情報７０，７２，７４を画面３８に表示させる。表示情報７０，７２，７４は、店舗に関する概略情報である。例えば、表示情報７０は、店舗名を示す情報であり、表示情報７２は、店舗の予約の概略を示す情報であり、表示情報７４は、店舗にて提供されているメニューの概略を示す情報である。例えば、ユーザがＵＩ部１６を操作することで表示情報７０を指定すると、制御部２２は、詳細な情報として、店舗の連絡先や地図等を画面３８に表示させる。また、ユーザが表示情報７２を指定すると、制御部２２は、予約の詳細な情報（例えば、各月の予約状況等を示す情報）を画面３８に表示させる。また、ユーザが表示情報７４を指定すると、制御部２２は、メニューの詳細な情報（例えば、モーニング用のメニュー、ランチ用のメニュー、ディナー用のメニュー）を画面３８に表示させる。ユーザが店舗から遠い位置にいる場合、ユーザが電話で空き席の有無を確認したり、予約の状況を確認したりすることがあるため、上記の概略情報は、その確認等の役に立つ。また、制御部２２は、インターネットやＳＮＳを利用することで取得された、店舗に関する関連情報７６を、画面３８に表示させてもよい。
【０１２５】
ユーザと店舗との間の距離が閾値未満の場合、図１９に示すように、制御部２２は、店舗に対応付けられている表示情報７４ａ、７４ｂ、７４ｃを画面３８に表示させる。表示情報７４ａ，７４ｂ，７４ｃは、店舗に関する詳細な情報であり、一例として、メニューに関する詳細な情報である。表示情報７４ａは、モーニング用のメニューを示す情報であり、表示情報７４ｂは、ランチ用のメニューを示す情報であり、表示情報７４ｃは、ディナー用のメニューを示す情報である。ユーザが店舗に近付くほど、ユーザがその店舗を利用する可能性が高くなると推測される。それ故、より詳細な情報（例えばメニューの詳細情報）を表示することで、概略的な情報を表示する場合と比べて、より有意な情報がユーザに提供される。
【０１２６】
具体例１１によれば、ユーザと対象物との間の距離が閾値以上の場合、概略的な情報が表示され、その距離が閾値未満の場合、より詳細な情報が表示される。こうすることで、ユーザの位置に応じた有意な情報がユーザに提供される。
【０１２７】
なお、制御部２２は、ユーザがＵＩ部１６を操作することで切り替え指示を与えた場合、制御部２２は、その指示に従って、概略情報の表示と詳細情報の表示とを切り替えてもよい。例えば、ユーザと店舗との間の距離が閾値未満の場合、制御部２２は、詳細情報を画面３８に表示させるが、ユーザが切り替え指示を与えた場合、制御部２２は、概略情報を画面３８に表示させる。ユーザと店舗との間の距離が閾値以上の場合も同様である。
【０１２８】
なお、具体例１１では店舗を例に挙げて説明したが、対象物が機器であっても同様の表示制御が行われる。例えば、ユーザと画像形成装置との間の距離が閾値以上の場合、制御部２２は、画像形成装置の状態（例えば、コピー中、スリープ中等の状態）を示す表示情報を画面３８に表示させる。一方、ユーザと画像形成装置との間の距離が閾値未満の場合、制御部２２は、画像形成装置が有する機能（例えば、コピー機能やスキャン機能）を示す表示情報を画面３８に表示させる。
【０１２９】
上記の第１実施形態によれば、特定の位置や特定の画像に複数の表示情報が対応付けられて、当該複数の表示情報が同時に画面３８に表示される場合であっても、各表示情報の少なくとも一部分が表示されるので、全く表示されない表示情報（一部分も表示されない表示情報）の発生が防止される。例えば、ＡＲ技術が活用されることで、特定の位置や特定の画像に対応付けられている表示情報の量が増大した場合であっても、全く表示されない表示情報の発生が防止される。また、全く表示されない表示情報の発生を防止するために、同時に表示される情報の量を制限する必要がない。
【０１３０】
＜第２実施形態＞
以下、第２実施形態について説明する。第２実施形態では、端末装置１０の制御部２２は、ユーザ（端末装置１０）の位置に応じて、表示情報の表示を制御する。例えば、制御部２２は、ユーザの位置に応じて、表示情報の内容を変えてもよいし、表示情報の表示態様を変えてもよい。
【０１３１】
具体的には、位置ＡＲ技術を用いることで特定の位置（例えば対象物の位置）に紐付く表示情報が特定された場合、制御部２２は、ユーザの位置に応じて、その表示情報の内容や表示形態を変える。例えば、制御部２２は、その特定の位置とユーザの位置との間の位置関係に応じて、表示情報の内容や表示形態を変える。より詳しく説明すると、制御部２２は、特定の位置とユーザの位置との間の角度関係、距離関係、特定の位置に対するユーザの方向に関する関係等に応じて、表示情報の内容や表示形態を変える。制御部２２は、ＧＰＳ等を利用することで、ユーザの位置と特定の位置（例えば対象物の位置）を検知し、その検知結果に基づいて、ユーザの位置と特定の位置との間の角度関係、距離関係、方向関係等を検知する。
【０１３２】
また、画像ＡＲ技術を用いることで特定の画像（例えば対象物に紐付く画像）に紐付く表示情報が特定された場合、制御部２２は、ユーザの位置に応じて、その表示情報の内容や表示形態を変える。例えば、制御部２２は、その対象物とユーザとの間の位置関係に応じて、表示情報の内容や表示態様を変える。より詳しく説明すると、制御部２２は、対象物とユーザとの間の角度関係、距離関係、対象物に対するユーザの方向に関する関係等に応じて、表示情報の内容や表示形態を変える。制御部２２は、ＧＰＳ等を利用することで、ユーザの位置と対象物の位置を検知し、その検知結果に基づいて、ユーザと対象物との間の角度関係、距離関係、方向関係等を検知する。
【０１３３】
以下、第２実施形態について具体例を挙げて詳しく説明する。
【０１３４】
（具体例１２）
図２０から図２２を参照して、具体例１２について説明する。図２０には、対象物としての画像形成装置７８とユーザ（端末装置１０）との間の位置関係が示されている。図２１と図２２には、画面が示されている。第１実施形態と同様に、画像ＡＲ技術又は位置ＡＲ技術によって、画像形成装置７８（又は画像形成装置７８の設置位置）に対応付けられている表示情報が特定されている。
【０１３５】
第１位置８０は第２位置８２と比べて、画像形成装置７８により近い位置である。各位置と画像形成装置７８の位置との間の位置関係毎の表示情報が、表示情報管理情報に登録されている。例えば、画像形成装置７８との間の距離毎の表示情報が、表示情報管理情報に登録されている。制御部２２は、ユーザと画像形成装置７８との間の距離関係に応じて、表示情報の内容や表示形態を変える。例えば、制御部２２は、ユーザが第１位置８０にいる場合と第２位置８２にいる場合とで、互いに異なる表示情報を画面３８に表示させる。
【０１３６】
図２１には、ユーザが第１位置８０（画像形成装置７８により近い位置）にいるときに表示される表示情報が示されている。図２１に示すように、制御部２２は、画像形成装置７８に紐付く画像８４を画面３８に表示させ、更に、第１位置８０と画像形成装置７８の位置との間の距離に対応付けられている表示情報８６，８８を画面３８に表示させる。制御部２２は、第１実施形態と同様に、画像８４上に表示情報８６，８８を部分的に重ねて表示させてもよいし、表示情報８６，８８のそれぞれの一部又は全部が画面３８に表示されるように、表示情報８６，８８の表示形態を制御してもよい。図２１に示す例では、表示情報８６，８８のそれぞれの全部が画面３８に表示されている。表示情報８６，８８は画像形成装置７８の状態を示す情報である。具体的には、表示情報８６は、トナー切れが近いことを示す情報であり、表示情報８８は、紙切れが近いことを示す情報である。
【０１３７】
図２２には、ユーザが第２位置８２（画像形成装置７８からより遠い位置）にいるときに表示される表示情報が示されている。図２２に示すように、制御部２２は、画像８４を画面３８に表示させ、更に、第２位置８２と画像形成装置７８の位置との間の距離に対応付けられている表示情報９０を画面３８に表示させる。制御部２２は、第１実施形態と同様に、画像８４上に表示情報９０を部分的に重ねてもよいし、複数の表示情報が表示される場合、各表示情報の一部又は全部が画面３８に表示されるように、各表示情報の表示形態を制御してもよい。表示情報９０は、画像形成装置７８が印刷中であることを示す情報である。
【０１３８】
具体例１２によれば、ユーザと対象物との間の距離に応じた表示情報がユーザに提供される。例えば、第１位置８０ではより詳細な表示情報が表示され、第２位置８２ではより概略的な表示情報が表示されてもよい。また、対象物が機器の場合、第１位置８０では、機器を操作するためのメニュー画面等が表示情報として表示され、第２位置８２では、機器の状態を示す表示情報が表示されてもよい。
【０１３９】
また、制御部２２は、第１位置８０と第２位置８２とで表示情報の表示態様を変えてもよい。具体的には、制御部２２は、第１位置８０では、表示情報の表示領域のサイズを大きくして表示情報を画面３８に表示させ、第２位置８２では、表示情報の表示領域のサイズを小さくして表示情報を画面３８に表示させてもよい。また、制御部２２は、第１位置８０では、表示情報が示す文字列の表示サイズを大きくして画面３８に表示情報を表示させ、第２位置８２では、表示情報が示す文字列の表示サイズを小さくして画面３８に表示情報を表示させてもよい。
【０１４０】
別の例として、制御部２２は、ユーザがいる位置に関わらず、画像形成装置７８との間の各距離に対応付けられている各表示情報を画面３８に表示させ、ユーザと画像形成装置７８との間の距離に応じて、各表示情報の表示領域のサイズを変えてもよいし、各表示情報が示す文字列の表示サイズを変えてもよい。例えば、制御部２２は、第１位置８０と画像形成装置７８との間の距離に対応付けられている表示情報８６，８８と、第２位置８２と画像形成装置７８との間の距離に対応付けられている表示情報９０を画面３８に表示させる。ユーザが第１位置８０にいる場合、制御部２２は、表示情報９０よりも表示情報８６，８８を拡大させて画面３８に表示させる。一方、ユーザが第２位置８２にいる場合、制御部２２は、表示情報８６，８８よりも表示情報９０を拡大させて画面３８に表示させる。
【０１４１】
（具体例１３）
図２３を参照して、具体例１３について説明する。図２３には、対象物としての画像形成装置９２とユーザ（端末装置１０）との間の位置関係が示されている。第１実施形態と同様に、画像ＡＲ技術又は位置ＡＲ技術によって、画像形成装置９２（又は画像形成装置９２の設置位置）に対応付けられている表示情報が特定される。
【０１４２】
画像形成装置９２は、例えば、前面９２ａ、背面９２ｂ、右側面９２ｃ及び左側面９２ｄを有する。仮想線９４は、右側面９２ｃと左側面９２ｄを貫く線である。
【０１４３】
具体例１２と同様に、各位置と画像形成装置９２の位置との間の位置関係毎の表示情報が、表示情報管理情報に登録されている。例えば、画像形成装置９２との間の距離毎の表示情報が、表示情報管理情報に登録されている。また、画像形成装置９２との間の角度毎の表示情報が、表示情報管理情報に登録されている。ある位置の角度は、例えば、仮想線９４と当該位置とがなす角度である。また、画像形成装置９２に対する方向毎の表示情報が、表示情報管理情報に登録されている。方向は、例えば、画像形成装置９２の上方や下方等である。画像形成装置９２の前面、背面、側面が、方向として定義されてもよい。また、画像形成装置９２に対する高さ毎の表示情報が、表示情報管理情報に登録されていてもよい。距離毎、角度毎、方向毎及び高さ毎の中の少なくとも２つの組み合わせと表示情報とが対応付けられて、表示情報管理情報に登録されていてもよい。
【０１４４】
例えば、第１位置９６と画像形成装置９２との間の距離は、第３位置１００と画像形成装置９２との間の距離と同じであるが、第１位置９６と画像形成装置９２との間の角度は、第３位置１００と画像形成装置９２との間の角度とは異なる。この場合、制御部２２は、ユーザが第１位置９６にいる場合と第３位置１００にいる場合とで、互いに異なる表示情報を画面３８に表示させる。こうすることで、画像形成装置９２までの距離が同じ位置であっても、角度毎に異なる表示情報をユーザに提供することができる。
【０１４５】
また、第３位置１００と画像形成装置９２との間の角度は、第５位置１０４と画像形成装置との間の角度と同じであるが、第３位置１００と画像形成装置９２との間の距離は、第５位置１０４と画像形成装置９２との間の距離とは異なる。この場合、制御部２２は、ユーザが第３位置１００にいる場合と第５位置１０４にいる場合とで、互いに異なる表示情報を画面３８に表示させる。例えば、制御部２２は、画像形成装置９２により近い第３位置１００では詳細な表示情報を画面３８に表示させ、画像形成装置９２からより遠い第５位置１０４では概略的な表示情報を画面３８に表示させる。こうすることで、画像形成装置９２との間の角度が同じ位置であっても、距離毎に異なる表示情報をユーザに提供することができる。
【０１４６】
また、第２位置９８は、画像形成装置９２の上方の位置である。例えば、ユーザが、第２位置９８にて画像形成装置９２を見下ろしてカメラ１８によって画像形成装置９２を撮影した場合、制御部２２は、第２位置９８と画像形成装置９２との間の位置関係（距離、高さ、角度）に対応付けられている表示情報を画面３８に表示させる。例えば、画像形成装置９２の概略的な表示情報が表示される。こうすることで、画像形成装置９２との間の距離が同じ位置であっても、高さ毎に異なる表示情報をユーザに提供することができる。
【０１４７】
また、第４位置１０２は、画像形成装置９２の背面側の位置である。ユーザが第４位置１０２からカメラ１８によって画像形成装置９２の背面を撮影している場合、制御部２２は、ユーザが画像形成装置９２の前面側の位置（例えば、第１位置、第２位置、第３位置、第５位置）にいる場合とは異なる表示情報を画面３８に表示させる。例えば、画像形成装置９２の背面側の構造や部品や機能等に関する表示情報が、画面３８に表示される。
【０１４８】
また、制御部２２は、距離毎、角度毎、方向毎又は高さ毎に、表示情報の内容を変えると共に、又は、表示情報の内容を変えずに、表示情報の表示サイズを変えてもよい。
【０１４９】
以下、具体例１３の適用例について説明する。具体例１３は製造現場に適用されてもよい。この場合、制御部２２は、機器の前面側から当該機器を撮影した場合と、当該機器の背面側から当該機器を撮影した場合とで、表示情報を変えて画面３８に表示させる。機器の前面側から当該機器を撮影した場合には、当該機器の前面の構造や部品や機能等に関する表示情報が表示され、当該機器の背面側から当該機器を撮影した場合、当該機器の背面の構造や部品や機能等に関する表示情報が表示される。こうすることで、前面側で作業する人（例えば前面側の部品を組み立てる作業者）には、前面に関する表示情報が提供され、背面側で作業する人（例えば背面側の部品を組み立てる作業者）には、背面に関する表示情報が提供される。
【０１５０】
別の例として、具体例１３はイベント会場に適用されてもよい。例えば、企業等が出展しているイベント会場の広範囲を上方から撮影した場合（イベント会場を俯瞰した場合）、制御部２２は、出展している各企業の名称等の簡易情報を画面３８に表示させる。こうすることで、ユーザにおいて、イベントにどのような企業が出展しているのかが容易に分かる。また、企業の出展ブースを間近で撮影した場合、制御部２２は、その企業に関する詳細な情報（例えば、展示内容の詳細な情報等）を画面３８に表示させる。こうすることで、ユーザがブースに移動したときに、企業の詳細な情報がユーザに提供される。
【０１５１】
また、制御部２２は、イベント会場の広範囲を上方から撮影した場合、イベント会場にて使用可能なポイントの情報を画面３８に表示させ、会場内のブースを間近で撮影した場合、そのブースに関する詳細な情報を画面３８に表示させてもよい。
【０１５２】
＜その他の実施形態＞
以下、その他の実施形態について説明する。ここでは、道案内に上記の第１実施形態及び第２実施形態が適用された場合について説明する。図２４には、ユーザと目的地との間の関係が示されている。目的地は、特定の位置の一例に相当し、オブジェ１０６（オブジェα）が設置されている位置である。ユーザ１０８は、カメラ１８によってオブジェ１０６を撮影しているものとする。また、オブジェ１０６の周囲にユーザ群１１０がいるため、オブジェ１０６の周囲にて人混みが発生しているものとする。
【０１５３】
上記の第１実施形態と同様に、ＡＲ技術を用いることで、オブジェ１０６が識別され、オブジェ１０６に紐付く情報が端末装置１０のＵＩ部１６に表示される。
【０１５４】
図２５と図２６には、端末装置１０の画面３８が示されている。図２５には、ユーザ１０８が位置Ａにいるときに画面３８に表示される情報が示されている。図２６には、ユーザが位置Ｂにいるときに画面３８に表示される情報が示されている。位置Ｂは、位置Ａよりもオブジェ１０６に近い位置である。
【０１５５】
図２５に示すように、画面３８には、オブジェ１０６に紐付く画像１１２（特定の画像の一例に相当する）と、ユーザ群１１０に紐付く画像１１４が表示されている。画像１１２は、オブジェ１０６を撮影することで生成された画像であってもよいし、オブジェ１０６を模式的に表す画像（例えばアイコン）であってもよい。
【０１５６】
端末装置１０の制御部２２は、各種のセンサを用いることで、ユーザ１０８とオブジェ１０６との間の距離、ユーザ１０８の位置を基準としたオブジェ１０６の方向、及び、ユーザ１０８がオブジェ１０６に到着すると予測される時間（到着予定時刻）の中の少なくとも１つを演算する。距離や方向は、ＧＰＳ等を利用することで演算される。到着予定時刻は、ユーザ１０８とオブジェ１０６との間の距離と、ユーザ１０８の移動速度と、に基づいて演算される。移動速度は、例えば、当該ユーザ１０８の過去の平均移動速度、現時点から遡って予め定められた時間内における平均移動速度（例えば１０分間の平均移動速度）、予め定められた移動速度（例えばユーザが指定した移動速度、デフォルトの移動速度）、当該ユーザ１０８と同じ属性（例えば、性別、年令、身長、体重等）を有する人の平均移動速度、等である。
【０１５７】
制御部２２は、上記のようにして得られた各情報を案内情報として画面３８に表示させる。案内情報は、ユーザをオブジェ１０６に案内するための情報であり、オブジェ１０６に紐付く情報ともいえる。図２５に示すように、制御部２２は、例えば、矢印１１６、目印１１８及び補足情報１２０を案内情報として画面３８に表示させる。制御部２２は、矢印１１６、目印１１８及び補足情報１２０の中の少なくとも１つを案内情報として画面３８に表示させてもよい。なお、ユーザが目的地を指定し、制御部２２は、ユーザによって指定された目的地についての案内情報を作成して画面３８に表示させてもよい。例えば、ユーザが画面３８上でオブジェ１０６を目的地として指定したり、音声によってオブジェ１０６を目的地として指定したりした場合、制御部２２は、ユーザをオブジェ１０６に案内するための案内情報を作成して画面３８に表示させる。
【０１５８】
矢印１１６は、ユーザ１０８の位置Ａを基準としたオブジェ１０６の方向を示す画像である。制御部２２は、背景画像（オブジェ１０６以外の人や物体等を表す画像）としての画像１１４上に矢印１１６を重畳させて画面３８に表示させる。つまり、制御部２２は、画像１１４よりも前面側に矢印１１６を表示させる。こうすることで、オブジェ１０６以外の人や物体が画面３８に表示されている場合であっても、オブジェ１０６の方向がユーザに示される。
【０１５９】
目印１１８は、オブジェ１０６の目印となる画像である。制御部２２は、オブジェ１０６に紐付く画像１１２上に目印１１８を重畳させて画面３８に表示させる。また、目印１１８の表示位置に背景画像が表示されている場合、制御部２２は、その背景画像上に目印１１８を重畳させて画面３８に表示させる。
【０１６０】
補足情報１２０は、例えば、オブジェ１０６の名称（例えばオブジェα）、オブジェ１０６までの距離（例えば２００ｍ）、到着予定時間（例えば２分）、等を含む情報である。制御部２２は、名称、距離及び到着予定時間の中の少なくとも１つの情報を補足情報１２０として画面３８に表示させてもよい。
【０１６１】
制御部２２は、ユーザ１０８とオブジェ１０６との間の位置関係に応じて、矢印１１６、目印１１８及び補足情報１２０の中の少なくとも１つを変える。
【０１６２】
例えば、ユーザが位置Ａから位置Ｂに移動した場合、その移動に伴って、画面３８の表示内容が、図２５に示されている表示内容から図２６に示されている表示内容に変更される。
【０１６３】
図２６には、図２５と同様に、画像１１２，１１４、矢印１１６、目印１１８、及び、補足情報１２０が、画面３８に表示されている。ユーザは位置Ａよりもオブジェ１０６に近い位置Ｂにいるため、位置Ｂにおける画像１１２，１１４は、位置Ａにおける画像１１２，１１４よりも大きく表示される。この場合も、制御部２２は、矢印１１６を画像１１４上に重畳させ、目印１１８を画像１１２，１１４上に重畳させる。また、オブジェ１０６までの距離と到着予定時間が変わっているため、制御部２２は、補足情報１２０を更新する。
【０１６４】
制御部２２は、画面３８に表示されている各画像（例えば画像１１２，１１４）と、画面３８に表示されている案内情報（例えば矢印１１６、目印１１８、及び、補足情報１２０）と、の間の関係に応じて、当該案内情報の表示態様を変える。例えば、制御部２２は、表示態様の変更として、案内情報の表示位置、表示色、及び、表示サイズの中の少なくとも１つを変える。
【０１６５】
例えば、補足情報１２０の表示位置が、他の画像（例えば画像１１２，１１４）の表示位置と重なっている場合や、他の画像（例えば画像１１２，１１４）との関係で、補足情報１２０の色のコントラストが弱い場合（例えば、コントラスト値が閾値以下となった場合）、制御部２２は、補足情報１２０が示す文字列が目立って表示されるように、その文字列の表示色を変える。例えば、補足情報１２０の表示位置が、画像１１２，１１４の表示位置と重なっていない場合（図２５参照）、制御部２２は、予め定められた色（例えば水色等）を文字列の表示色として用いる。補足情報１２０の表示位置が、画像１１２の表示位置と重なっている場合（図２６参照）、制御部２２は、補足情報１２０が重なっている画像１１２の色との関係でよりコントラストが強くなる色（例えば黒色等）を文字列の表示色として用いる。こうすることで、文字列が他の画像に埋もれて、ユーザにとって見え難くなるという状況が解消される。また、制御部２２は、文字の太さ、文字の大きさ、又は、フォントの種類を変えてもよい。
【０１６６】
図２７には、ユーザ１０８が位置Ｂにいるときの別の表示例が示されている。図２７に示す例では、制御部２２は、補足情報１２０に含まれる各情報が他の画像（例えば画像１１２，１１４）と重ならないように、当該各情報の表示位置を変えている。例えば、制御部２２は、到着予定時間を示す情報１２２（文字列）と、目的地と距離を示す情報１２４（文字列）と、を分けて、画像１１２，１１４と重ならない位置に情報１２２，１２４を表示させている。なお、制御部２２は、各情報の表示位置を変えると共に、各情報の表示色や表示サイズ（例えば、文字の太さや大きさ）を変えてもよい。
【０１６７】
また、制御部２２は、ユーザの指示に従って、又は、自動的に、補足情報１２０を音声情報として出力してもよい。例えば、予め定められた文字の大きさを維持しつつ、補足情報１２０を他の画像（例えば画像１１２，１１４）に重ねずに表示することができない場合、制御部２２は、補足情報１２０を表示すると共に、又は、補足情報１２０を表示せずに、補足情報１２０を音声情報として自動的に出力する。なお、制御部２２は、オブジェ１０６の方向を示す情報を音声情報として出力してもよい。
【０１６８】
図２８には、ユーザ１０８が位置Ｂにいるときの別の表示例が示されている。図２８に示す例では、制御部２２は、図２６に示されている補足情報１２０に代えて、補足情報１２６を画面３８に表示させる。補足情報１２６が示す内容自体は、補足情報１２０が示す内容と同じである。補足情報１２６は、枠で囲まれており、これにより、補足情報１２６が強調して表示されている。また、補足情報１２６が表示されている領域（枠で囲まれた領域）は、塗り潰されている。こうすることで、補足情報１２６が重畳している背景部分は表示されず、その背景部分に補足情報１２６が埋もれずに済む。
【０１６９】
上記の端末装置１０及びサーバ１２のそれぞれは、一例としてハードウェアとソフトウェアとの協働により実現される。具体的には、端末装置１０及びサーバ１２のそれぞれは、図示しないＣＰＵ等の１又は複数のプロセッサを備えている。当該１又は複数のプロセッサが、図示しない記憶装置に記憶されたプログラムを読み出して実行することにより、端末装置１０及びサーバ１２のそれぞれの各部の機能が実現される。上記プログラムは、ＣＤやＤＶＤ等の記録媒体を経由して、又は、ネットワーク等の通信経路を経由して、記憶装置に記憶される。別の例として、端末装置１０及びサーバ１２のそれぞれの各部は、例えばプロセッサや電子回路やＡＳＩＣ（Application Specific Integrated Circuit）等のハードウェア資源により実現されてもよい。その実現においてメモリ等のデバイスが利用されてもよい。更に別の例として、端末装置１０及びサーバ１２のそれぞれの各部は、ＤＳＰ（Digital Signal Processor）やＦＰＧＡ（Field Programmable Gate Array）等によって実現されてもよい。
【符号の説明】
【０１７０】
１０  端末装置、１２  サーバ、２０  記憶部、２２  制御部、２４  特定部。
【図１】
2019075126.tif 000003
【図２】
2019075126.tif 000004
【図３】
2019075126.tif 000005
【図４】
2019075126.tif 000006
【図５】
2019075126.tif 000007
【図６】
2019075126.tif 000008
【図７】
2019075126.tif 000009
【図８】
2019075126.tif 000010
【図９】
2019075126.tif 000011
【図１０】
2019075126.tif 000012
【図１１】
2019075126.tif 000013
【図１２】
2019075126.tif 000014
【図１３】
2019075126.tif 000015
【図１４】
2019075126.tif 000016
【図１５】
2019075126.tif 000017
【図１６】
2019075126.tif 000018
【図１７】
2019075126.tif 000019
【図１８】
2019075126.tif 000020
【図１９】
2019075126.tif 000021
【図２０】
2019075126.tif 000022
【図２１】
2019075126.tif 000023
【図２２】
2019075126.tif 000024
【図２３】
2019075126.tif 000025
【図２４】
2019075126.tif 000026
【図２５】
2019075126.tif 000027
【図２６】
2019075126.tif 000028
【図２７】
2019075126.tif 000029
【図２８】
2019075126.tif 000030