(57)【要約】【課題】ユーザが記録媒体収容部を見た際にユーザに対して情報の表示を行わない場合に比べ、記録媒体の向きが誤った状態で記録媒体収容部に記録媒体が収容されることを抑制する。【解決手段】ＡＲ表示装置２００は、画像を表示するディスプレイ２０７を備え、現実空間に画像を付加した拡張現実空間をユーザに見せる。ユーザがＡＲ表示装置２００を通して用紙収容部１１０を見た場合に、ＡＲ表示装置２００のディスプレイ２０７に、画像形成部１２０にて形成される予定の画像である形成予定画像が表示される。【選択図】図１
2018027638.tif 000002
【特許請求の範囲】
【請求項１】
画像を表示する表示部を備えた表示装置であって、ユーザが当該表示装置を通して当該ユーザの視線に先に位置する対象物を視認可能な表示装置と、
画像が形成される記録媒体を収容する記録媒体収容部と、
ユーザが前記表示装置を通して前記記録媒体収容部を見た場合に、当該記録媒体収容部に収容される記録媒体に形成される予定の画像である形成予定画像の情報を前記表示部に表示する表示制御部と、
を備える表示システム。
【請求項２】
画像を表示する表示部を備えた表示装置であって、当該表示部の背後に位置する物を当該表示部に表示させることができる表示装置と、
画像が形成される記録媒体を収容する記録媒体収容部と、
前記表示装置の前記表示部の背後に前記記録媒体収容部が位置する場合に、当該記録媒体収容部に収容される記録媒体に形成される予定の画像である形成予定画像の情報を当該表示部に表示する表示制御部と、
を備える表示システム。
【請求項３】
前記表示制御部が前記表示部に表示する前記情報を生成する生成手段を更に備え、
前記生成手段は、前記形成予定画像が記録媒体に対して形成される際の当該形成予定画像の向きに応じて、生成する前記情報の向きを変更する請求項１又は２に記載の表示システム。
【請求項４】
前記記録媒体収容部からの記録媒体に対して前記形成予定画像を形成する画像形成部と、前記表示制御部が前記表示部に表示する前記情報を生成する生成手段とを更に備え、
前記生成手段は、前記記録媒体収容部から前記画像形成部への記録媒体の搬送に関する設定に応じて、生成する前記情報の向きを変更する請求項１又は２に記載の表示システム。
【請求項５】
前記表示制御部は、記録媒体の一方の面側に形成される予定の画像である第１面側形成予定画像の情報と、記録媒体の他方の面側に形成される予定の画像である第２面側形成予定画像の情報とを、前記表示部に表示する請求項１乃至４の何れかに記載の表示システム。
【請求項６】
前記表示制御部は、前記第１面側形成予定画像の前記情報と前記第２面側形成予定画像の前記情報との間に、記録媒体を表す画像を表示する請求項５に記載の表示システム。
【請求項７】
前記記録媒体収容部は、複数設けられ、
前記形成予定画像が記録媒体に対して形成される際、複数の前記記録媒体収容部のうちの一の記録媒体収容部から記録媒体が送り出され、
前記表示制御部は、ユーザが前記表示装置を通して前記一の記録媒体収容部を見た場合に、前記形成予定画像の前記情報の表示を行い、当該一の記録媒体収容部以外の他の記録媒体収容部を見た場合、当該表示を行わない請求項１乃至６の何れかに記載の表示システム。
【請求項８】
前記記録媒体収容部は、複数設けられ、
前記形成予定画像が記録媒体に対して形成される際、複数の前記記録媒体収容部のうちの一の記録媒体収容部から記録媒体が送り出され、
前記表示制御部は、ユーザが前記表示装置を通して前記一の記録媒体収容部以外の他の記録媒体収容部を見た場合、記録媒体の収容先が当該他の記録媒体収容部ではないことを示す情報を、当該表示部に表示する請求項１乃至６の何れかに記載の表示システム。
【請求項９】
前記表示部に表示された、前記形成予定画像の前記情報を回転しあるいは移動させる移動手段をさらに備える請求項１乃至８の何れかに記載の表示システム。
【請求項１０】
前記表示制御部が前記表示部に表示する、前記形成予定画像の前記情報を生成する生成手段を更に備え、
前記生成手段は、前記形成予定画像が複数ページに亘って形成される画像である場合、複数ページ分の前記情報を生成し、
前記表示部に表示された前記情報を、他のページに対応した情報に切り替える切り替え手段をさらに備える請求項１乃至９の何れかに記載の表示システム。
【請求項１１】
画像を表示する表示部を備えた表示装置であってユーザが当該表示装置を通して当該ユーザの視線に先に位置する対象物を視認可能な当該表示装置における表示を制御する制御装置であり、
前記表示部と通信を行う通信部と、
ユーザが、前記表示装置を通して、画像形成装置に設けられた記録媒体収容部を見た場合に、前記表示部に、当該画像形成装置にて形成される予定の画像である形成予定画像の情報を表示する表示制御部と、
を備える制御装置。
【請求項１２】
画像を表示する表示部を備えた表示装置であって当該表示部の背後に位置する物を当該表示部に表示させることができる表示装置における表示を制御する制御装置であり、
前記表示部と通信を行う通信部と、
前記表示装置の前記表示部の背後に、画像形成装置に設けられた記録媒体収容部が位置する場合に、当該記録媒体収容部に収容される記録媒体に形成される予定の画像である形成予定画像の情報を当該表示部に表示する表示制御部と、
を備える制御装置。
【請求項１３】
画像を表示する表示部を備えた表示装置であってユーザが当該表示装置を通して当該ユーザの視線に先に位置する対象物を視認可能な当該表示装置における表示を制御するコンピュータにて実行されるプログラムであり、
前記表示部と通信を行う通信機能と、
ユーザが、前記表示装置を通して、画像形成装置に設けられた記録媒体収容部を見た場合に、前記表示部に、当該画像形成装置にて形成される予定の画像である形成予定画像の情報を表示する表示制御機能と、
をコンピュータに実現させるためのプログラム。
【請求項１４】
画像を表示する表示部を備えた表示装置であって当該表示部の背後に位置する物を当該表示部に表示させることができる表示装置における表示を制御するコンピュータにて実行されるプログラムであり、
前記表示部と通信を行う通信機能と、
前記表示装置の前記表示部の背後に、画像形成装置に設けられた記録媒体収容部が位置する場合に、当該記録媒体収容部に収容される記録媒体に形成される予定の画像である形成予定画像の情報を当該表示部に表示する表示制御機能と、
をコンピュータに実現させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示システム、制御装置、および、プログラムに関する。
【背景技術】
【０００２】
特許文献１には、ユーザをガイドするためのＡＲガイダンスを表示する処理が開示されている。
特許文献２には、ジョブの実行状況を、画像形成装置の通紙経路上の仮想用紙で表した拡張現実空間で表示する処理が開示されている。
特許文献３には、出力イメージ画像を現実空間に存在する用紙に重ね合わせた拡張現実空間を表示部に表示する処理が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１３−１４０５６３号公報
【特許文献２】特開２０１４−１９４７２５号公報
【特許文献３】特開２０１５−９９４４８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
例えばチケットのように特殊な模様が予め印刷されている用紙（プレプリント紙）（記録媒体）を使用して印刷ジョブを実行することがある。このような印刷ジョブでは、用紙の上下方向／左右方向／裏表等が一意に決定される訳ではなく、プレプリント紙に対して印刷情報をどのように印刷したいか、操作者が判断してプレプリント紙の給紙方向を決定するような場合がある。
記録紙などの記録媒体の向きが誤った状態で記録媒体収容部に記録媒体が収容されると、記録媒体に形成される画像が、本来予定していた方向とは異なる方向を向いた状態で記録媒体に形成されるおそれがある。
本発明の目的は、ユーザが記録媒体収容部を見た際にユーザに対して情報の表示を行わない場合に比べ、記録媒体の向きが誤った状態で記録媒体収容部に記録媒体が収容されることを抑制することにある。
【課題を解決するための手段】
【０００５】
請求項１に記載の発明は、画像を表示する表示部を備えた表示装置であって、ユーザが当該表示装置を通して当該ユーザの視線に先に位置する対象物を視認可能な表示装置と、画像が形成される記録媒体を収容する記録媒体収容部と、ユーザが前記表示装置を通して前記記録媒体収容部を見た場合に、当該記録媒体収容部に収容される記録媒体に形成される予定の画像である形成予定画像の情報を前記表示部に表示する表示制御部と、を備える表示システムである。
請求項２に記載の発明は、画像を表示する表示部を備えた表示装置であって、当該表示部の背後に位置する物を当該表示部に表示させることができる表示装置と、画像が形成される記録媒体を収容する記録媒体収容部と、前記表示装置の前記表示部の背後に前記記録媒体収容部が位置する場合に、当該記録媒体収容部に収容される記録媒体に形成される予定の画像である形成予定画像の情報を当該表示部に表示する表示制御部と、を備える表示システムである。
請求項３に記載の発明は、前記表示制御部が前記表示部に表示する前記情報を生成する生成手段を更に備え、前記生成手段は、前記形成予定画像が記録媒体に対して形成される際の当該形成予定画像の向きに応じて、生成する前記情報の向きを変更する請求項１又は２に記載の表示システムである。
請求項４に記載の発明は、前記記録媒体収容部からの記録媒体に対して前記形成予定画像を形成する画像形成部と、前記表示制御部が前記表示部に表示する前記情報を生成する生成手段とを更に備え、前記生成手段は、前記記録媒体収容部から前記画像形成部への記録媒体の搬送に関する設定に応じて、生成する前記情報の向きを変更する請求項１又は２に記載の表示システムである。
請求項５に記載の発明は、前記表示制御部は、記録媒体の一方の面側に形成される予定の画像である第１面側形成予定画像の情報と、記録媒体の他方の面側に形成される予定の画像である第２面側形成予定画像の情報とを、前記表示部に表示する請求項１乃至４の何れかに記載の表示システムである。
請求項６に記載の発明は、前記表示制御部は、前記第１面側形成予定画像の前記情報と前記第２面側形成予定画像の前記情報との間に、記録媒体を表す画像を表示する請求項５に記載の表示システムである。
請求項７に記載の発明は、前記記録媒体収容部は、複数設けられ、前記形成予定画像が記録媒体に対して形成される際、複数の前記記録媒体収容部のうちの一の記録媒体収容部から記録媒体が送り出され、前記表示制御部は、ユーザが前記表示装置を通して前記一の記録媒体収容部を見た場合に、前記形成予定画像の前記情報の表示を行い、当該一の記録媒体収容部以外の他の記録媒体収容部を見た場合、当該表示を行わない請求項１乃至６の何れかに記載の表示システムである。
請求項８に記載の発明は、前記記録媒体収容部は、複数設けられ、前記形成予定画像が記録媒体に対して形成される際、複数の前記記録媒体収容部のうちの一の記録媒体収容部から記録媒体が送り出され、前記表示制御部は、ユーザが前記表示装置を通して前記一の記録媒体収容部以外の他の記録媒体収容部を見た場合、記録媒体の収容先が当該他の記録媒体収容部ではないことを示す情報を、当該表示部に表示する請求項１乃至６の何れかに記載の表示システムである。
請求項９に記載の発明は、前記表示部に表示された、前記形成予定画像の前記情報を回転しあるいは移動させる移動手段をさらに備える請求項１乃至８の何れかに記載の表示システムである。
請求項１０に記載の発明は、前記表示制御部が前記表示部に表示する、前記形成予定画像の前記情報を生成する生成手段を更に備え、前記生成手段は、前記形成予定画像が複数ページに亘って形成される画像である場合、複数ページ分の前記情報を生成し、前記表示部に表示された前記情報を、他のページに対応した情報に切り替える切り替え手段をさらに備える請求項１乃至９の何れかに記載の表示システムである。
請求項１１に記載の発明は、画像を表示する表示部を備えた表示装置であってユーザが当該表示装置を通して当該ユーザの視線に先に位置する対象物を視認可能な当該表示装置における表示を制御する制御装置であり、前記表示部と通信を行う通信部と、ユーザが、前記表示装置を通して、画像形成装置に設けられた記録媒体収容部を見た場合に、前記表示部に、当該画像形成装置にて形成される予定の画像である形成予定画像の情報を表示する表示制御部と、を備える制御装置である。
請求項１２に記載の発明は、画像を表示する表示部を備えた表示装置であって当該表示部の背後に位置する物を当該表示部に表示させることができる表示装置における表示を制御する制御装置であり、前記表示部と通信を行う通信部と、前記表示装置の前記表示部の背後に、画像形成装置に設けられた記録媒体収容部が位置する場合に、当該記録媒体収容部に収容される記録媒体に形成される予定の画像である形成予定画像の情報を当該表示部に表示する表示制御部と、を備える制御装置である。
請求項１３に記載の発明は、画像を表示する表示部を備えた表示装置であってユーザが当該表示装置を通して当該ユーザの視線に先に位置する対象物を視認可能な当該表示装置における表示を制御するコンピュータにて実行されるプログラムであり、前記表示部と通信を行う通信機能と、ユーザが、前記表示装置を通して、画像形成装置に設けられた記録媒体収容部を見た場合に、前記表示部に、当該画像形成装置にて形成される予定の画像である形成予定画像の情報を表示する表示制御機能と、をコンピュータに実現させるためのプログラムである。
請求項１４に記載の発明は、画像を表示する表示部を備えた表示装置であって当該表示部の背後に位置する物を当該表示部に表示させることができる表示装置における表示を制御するコンピュータにて実行されるプログラムであり、前記表示部と通信を行う通信機能と、前記表示装置の前記表示部の背後に、画像形成装置に設けられた記録媒体収容部が位置する場合に、当該記録媒体収容部に収容される記録媒体に形成される予定の画像である形成予定画像の情報を当該表示部に表示する表示制御機能と、をコンピュータに実現させるためのプログラムである。
【発明の効果】
【０００６】
請求項１、２の発明によれば、ユーザが記録媒体収容部を見た際にユーザに対して情報の表示を行わない場合に比べ、記録媒体の向きが誤った状態で記録媒体収容部に記録媒体が収容されることを抑制できる。
請求項３の発明によれば、生成する情報の向きを変化させない場合に比べ、記録媒体の向きが誤った状態で記録媒体収容部に記録媒体が収容されることをさらに抑制できる。
請求項４の発明によれば、生成する情報の向きを変化させない場合に比べ、記録媒体の向きが誤った状態で記録媒体収容部に記録媒体が収容されることをさらに抑制できる。
請求項５の発明によれば、記録媒体の一方の面側の形成予定画像の情報のみを表示する場合に比べ、記録媒体の向きが誤った状態で記録媒体収容部に記録媒体が収容されることをさらに抑制できる。
請求項６の発明によれば、記録媒体を表す画像を表示しない場合に比べ、ユーザは、記録媒体と、形成予定画像との位置関係を把握しやすくなる。
請求項７の発明によれば、情報の表示を他の記録媒体収容部でも行う場合に比べ、本来収容される予定にない記録媒体収容部に記録媒体が収容されることを抑制できる。
請求項８の発明によれば、記録媒体の収容先が異なることを示す情報を表示しない場合に比べ、本来収容される予定にない記録媒体収容部に記録媒体が収容されることを抑制できる。
請求項９の発明によれば、情報の回転や移動を行えない場合に比べ、ユーザは、情報の確認を行いやすくなる。
請求項１０の発明によれば、他のページに対応した情報に切り替えることができない場合に比べ、記録媒体の向きが誤った状態で記録媒体収容部に記録媒体が収容されることをさらに抑制できる。
請求項１１、１２の発明によれば、ユーザが記録媒体収容部を見た際にユーザに対して情報の表示を行わない場合に比べ、記録媒体の向きが誤った状態で記録媒体収容部に記録媒体が収容されることを抑制できる。
請求項１３、１４の発明によれば、ユーザが記録媒体収容部を見た際にユーザに対して情報の表示を行わない場合に比べ、記録媒体の向きが誤った状態で記録媒体収容部に記録媒体が収容されることを抑制できる。
【図面の簡単な説明】
【０００７】
【図１】表示システムの全体構成を示した図である。
【図２】情報処理装置のハードウエアの構成を示した図である。
【図３】ＡＲ表示装置のハードウエアの構成を示した図である。
【図４】ＡＲ表示装置が有するディスプレイに表示されたＡＲオブジェクトを示した図である。
【図５】（Ａ）、（Ｂ）は、用紙収容部に収容される用紙、および、形成予定画像を示した図である。
【図６】表示システムにて実行される処理の流れを説明する図である。
【図７】情報処理装置のＵＩに表示される、印刷ジョブの一覧を示した図である。
【図８】ＡＲ表示装置における他の表示例を示した図である。
【図９】（Ａ）、（Ｂ）は、ＡＲ表示装置における他の表示例を示した図である。
【図１０】（Ａ）、（Ｂ）は、ＡＲ表示装置における他の表示例を示した図である。
【図１１】（Ａ）、（Ｂ）は、ＡＲ表示装置における他の表示例を示した図である。
【発明を実施するための形態】
【０００８】
以下、添付図面を参照して、本発明の実施の形態について詳細に説明する。
図１は、本実施形態の表示システム１の全体構成を示した図である。
本実施形態の表示システム１には、記録媒体である用紙への画像形成を行う画像形成装置１００、ユーザに対して情報を表示する表示装置の一例としてのＡＲ（Augmented Reality）表示装置２００、画像形成装置１００およびＡＲ表示装置２００に接続された情報処理装置３００が設けられている。
【０００９】
画像形成装置１００には、記録媒体収容部の一例としての用紙収容部１１０が複数設けられ、この用紙収容部１１０の各々には、記録媒体の一例としての用紙が収容される。
ここで、用紙収容部１１０の各々は、移動可能に設けられており、図１の紙面の手前側方向に用紙収容部１１０を引っ張ることで、画像形成装置１００の本体部１００Ａから引き出せるようになっている。
【００１０】
用紙収容部１１０の各々には、用紙を検知する用紙検知部１１１が設けられている。また、用紙収容部１１０の各々には、各用紙収容部１１０の各々を識別するための収容部マーカ１１２が付されている。
本実施形態では、ＡＲ表示装置２００は、この収容部マーカ１１２を検出することで、用紙収容部１１０の各々を識別する（詳細は後述）。
【００１１】
また、画像形成装置１００には、画像形成部１２０、ＵＩ（User Interface）１３０、用紙情報管理部１４０、送信部１５０が設けられている。
画像形成部１２０は、用紙収容部１１０から搬送されてきた用紙に対して画像形成を行う。より具体的には、画像形成部１２０は、いわゆる電子写真方式やインクジェット方式を用いて、用紙への画像形成を行う。
ＵＩ１３０は、タッチパネル等により構成される。ＵＩ１３０は、各用紙収容部１１０に収容される用紙についての情報を表示したり、各用紙収容部１１０に収容される用紙についての情報をユーザから受け付けたりする。
【００１２】
用紙情報管理部１４０は、各用紙収容部１１０に収容される用紙についての情報を管理する。また、用紙情報管理部１４０は、管理している情報を、ＵＩ１３０を介して表示する。さらに、用紙情報管理部１４０は、ＵＩ１３０にてユーザにより設定された設定内容を受け付け、この設定内容を、各用紙収容部１１０に対応付ける。
送信部１５０は、各用紙収容部１１０に対応付けらけれた情報を、情報処理装置３００へ送信する。さらに、送信部１５０は、各用紙収容部１１０に対応付けらけれた情報が例えばユーザの設定操作により変更されたときには、変更後の情報を情報処理装置３００へ送信する。
【００１３】
情報処理装置３００は、受信部３１０、装置情報管理部３２０、装置情報格納部３３０、ジョブ管理部３４０、ＵＩ（User Interface）３０６、ジョブリスト格納部３５０、ＡＲ生成部３６０、送信部３７０を備える。
ここで、情報処理装置３００は、例えば、ＰＣ（Personal Computer）やサーバ装置により構成される。
【００１４】
受信部３１０は、画像形成装置１００から送信されてきた情報を受信する。
装置情報管理部３２０は、画像形成装置１００から送信されてきた、画像形成装置１００についての情報を管理する。また、装置情報管理部３２０は、必要に応じてジョブ管理部３４０に情報を提供する。
ジョブ管理部３４０は、ユーザから得た印刷ジョブを管理する。より具体的には、本実施形態では、画像形成装置１００にて印刷が行われる際、ユーザが有するＰＣ等から、情報処理装置３００へ印刷ジョブが送信される。ジョブ管理部３４０は、送信されてきたこの印刷ジョブを保持して管理する。
ここで、画像形成装置１００にて印刷が行われる際、ジョブ管理部３４０から画像形成装置１００へ、印刷ジョブが送信される。さらに、本実施形態では、ジョブ管理部３４０は、印刷ジョブについての情報をＡＲ生成部３６０に渡す。
【００１５】
ＵＩ３０６は、タッチパネルやキーボードなどにより構成され、印刷ジョブについての設定をユーザから受け付けるための画面を表示する。また、ＵＩ３０６は、ＡＲオブジェクトの作成を行う印刷ジョブを特定するための情報をユーザから受け付ける。
ＡＲ生成部３６０は、ＡＲオブジェクトを生成するとの指示がユーザからあった印刷ジョブについて、ＡＲオブジェクトの生成を行う。そして、ＡＲ生成部３６０は、生成したＡＲオブジェクトを送信部３７０に渡す。送信部３７０は、ＡＲオブジェクトをＡＲ表示装置２００に送信する。
【００１６】
次に、ＡＲ表示装置２００について説明する。
表示装置の一例としてのＡＲ表示装置２００は、モバイル端末により構成され、可搬型の装置となっている。ＡＲ表示装置２００には、ＣＣＤ（Charge-Coupled Device）などにより構成されるカメラ２０８が設けられている。撮影手段の一例であるこのカメラ２０８は、ＡＲ表示装置２００の周囲を撮影して撮影画像を得る。
また、ＡＲ表示装置２００には、表示部の一例としてのディスプレイ２０７が設けられている。このディスプレイ２０７は、画像を表示する。
【００１７】
本実施形態では、カメラ２０８により撮影された撮影画像が、ディスプレイ２０７に表示される。
さらに、本実施形態では、後述するように、ユーザがＡＲ表示装置２００を通して用紙収容部１１０を見た場合には、用紙収容部１１０を撮影した撮影画像（カメラ２０８により得られた撮影画像）（現実空間の画像）と、他の画像（ＡＲ生成部３６０により生成されたＡＲオブジェクト（生成画像））とが合わさった合成画像が、ＡＲ表示装置２００に表示される。
【００１８】
言い換えると、本実施形態では、現実空間の画像（撮影画像）に対してＡＲオブジェクトを合成した合成画像を生成し、この合成画像を、ＡＲ表示装置２００のディスプレイ２０７に映す。そして、本実施形態では、ユーザが、ディスプレイ２０７上の合成画像を視認することにより、ユーザは、拡張現実空間を見ることになる。
さらに説明すると、本実施形態では、用紙収容部１１０を撮影した撮影画像（現実空間の画像）に対して他の画像（ＡＲ生成部３６０により生成されたＡＲオブジェクト）が付加された拡張現実空間がユーザに提供され、ユーザは、この拡張現実空間を見る。ここで、現実空間とは、実存する空間を指し、拡張現実空間とは、人工的に生成された生成画像がこの現実空間に対して合成された空間を指す。
さらに説明すると、本実施形態では、ユーザは、ＡＲ表示装置２００を通してユーザの視線の先に位置する対象物を視認できるようになっている。より具体的には、ユーザが、ＡＲ表示装置２００に設けられたディスプレイ２０７を見ると、このディスプレイ２０７には、ＡＲ表示装置２００（ディスプレイ２０７）の背後に位置する、ユーザが視認しようとしている対象物が映る（カメラ２０８により撮影された対象物が映る）。これにより、ユーザは、ＡＲ表示装置２００の背後に位置する対象物（視線の先に位置する対象物）を視認できるようになる。
【００１９】
なお、ＡＲ表示装置２００は、光透過型のディスプレイ２０７に画像を表示するＡＲ表示装置２００を用いてもよい。
この場合、ユーザは、この光透過型のディスプレイ２０７を通して現実空間を視認する。言い換えると、この場合、ユーザは、ディスプレイ２０７の手前側からディスプレイ２０７を視認する形となり、ユーザは、ディスプレイ２０７の背後に位置する現実空間を、ディスプレイ２０７を通して視認する。付言すると、この場合、ユーザは、この光透過型のディスプレイ２０７を通して、視線の先に位置する対象物を視認する。さらに、このとき、ユーザは、この現実空間（対象物）とともに、ディスプレイ２０７に表示されるＡＲオブジェクトを視認する。
ここで、ＡＲ表示装置２００としては、専用装置であるヘッドマウントディスプレイ型のＡＲ表示装置２００を用いてもよいし、タブレット端末やスマートフォンを利用してＡＲ表示装置２００を構成してもよい。
【００２０】
図１に示すように、ＡＲ表示装置２００は、さらに、受信部２１１、ＡＲ情報格納部２１２、解析部２１３、ＵＩ（User Interface）２０６を備える。また、ＡＲ表示装置２００は、上記のとおり、ディスプレイ２０７、カメラ２０８を備える。
さらに、ＡＲ表示装置２００は、通信部２１４、画像表示制御部２１５、画像移動部２１６、画像切り替え部２１７を備える。
【００２１】
受信部２１１は、情報処理装置３００にて作成されたＡＲオブジェクトを受信する。受信されたこのＡＲオブジェクトは、ＡＲ情報格納部２１２に格納される。
解析部２１３は、カメラ２０８により得られた撮影画像を解析して、用紙収容部１１０の各々に付された収容部マーカ１１２を認識する。そして、本実施形態では、識別した収容部マーカ１１２に対応するＡＲオブジェクトがＡＲ情報格納部２１２に格納されている場合、このＡＲオブジェクトが、画像表示部であるディスプレイ２０７に表示される。
【００２２】
ＵＩ２０６は、タッチパネル等により構成され、ＡＲ表示装置２００に対してユーザによりなされる操作をユーザから受け付ける。
通信部２１４は、ＡＲ表示装置２００が有するディスプレイ２０７と通信を行う。具体的には、通信部２１４は、画像表示制御部２１５からの制御情報（ＡＲオブジェクトをディスプレイ２０７に表示するための制御情報）を、ディスプレイ２０７に出力する。これにより、ディスプレイ２０７上にＡＲオブジェクトが表示される。
【００２３】
表示制御部の一例としての画像表示制御部２１５は、通信部２１４を介してディスプレイ２０７の表示制御を行い、ディスプレイ２０７上に、ＡＲ情報格納部２１２に格納されているＡＲオブジェクトを表示する。
ここで、本実施形態では、通信部２１４および画像表示制御部２１５は、ＡＲ表示装置２００のディスプレイ２０７における表示を制御する制御装置として捉えることができる。
【００２４】
移動手段の一例としての画像移動部２１６は、ＡＲ表示装置２００のＵＩ２０６を介してユーザによりなされた指示に基づき、ディスプレイ２０７上のＡＲオブジェクトを回転や移動させる。
具体的には、画像移動部２１６は、ユーザからの指示があった場合に、画像表示制御部２１５に、ＡＲオブジェクトを回転や移動させる旨の制御信号を出力し、これに応じ、画像表示制御部２１５が、ＡＲオブジェクトを回転や移動させる。
【００２５】
切り替え手段の一例としての画像切り替え部２１７は、ディスプレイ２０７に表示されているＡＲオブジェクトを、他のＡＲオブジェクトに切り替える。
具体的には、画像切り替え部２１７は、画像表示制御部２１５に対して、ＡＲオブジェクトを他のＡＲオブジェクトに切り替える旨の制御信号を出力する。これに応じ、画像表示制御部２１５が、ディスプレイ２０７上に表示しているＡＲオブジェクトを、他のＡＲオブジェクトに切り替える。
【００２６】
具体的には、本実施形態では、印刷ジョブが、複数ページに亘って形成される画像を含んだ印刷ジョブである場合、ＡＲ生成部３６０が、複数ページ分のＡＲオブジェクトを生成し、ＡＲ表示装置２００のＡＲ情報格納部２１２に、複数ページ分のＡＲオブジェクトが格納される。
そして、本実施形態では、ＡＲ表示装置２００のＵＩ２０６を介し、ユーザからページ切り替えの指示があった場合、画像切り替え部２１７が、画像表示制御部２１５に対して、ＡＲオブジェクトを切り替える旨の制御信号を出力する。これに応じ、画像表示制御部２１５は、ＡＲ情報格納部２１２から、他のページに対応したＡＲオブジェクトを読み出し、このＡＲオブジェクトをディスプレイ２０７に表示する。
【００２７】
図２は、情報処理装置３００のハードウエアの構成を示した図である。
図２に示すように、情報処理装置３００は、ＣＰＵ（Central Processing Unit）３０１、ＲＡＭ（Random Access Memory）３０２、ＲＯＭ（Read Only Memory）３０３、磁気記憶装置３０４を備える。さらに、情報処理装置３００は、外部との通信を行うための通信インタフェース（通信Ｉ／Ｆ）３０５、タッチパネルやキーボード等とにより構成されるＵＩ３０６を備える。
【００２８】
ＲＯＭ３０３、磁気記憶装置３０４は、ＣＰＵ３０１により実行されるプログラムを記憶する。ＣＰＵ３０１は、ＲＯＭ３０３や磁気記憶装置３０４に記憶されているプログラムを読み出し、ＲＡＭ３０２を作業エリアにしてプログラムを実行する。
ＣＰＵ３０１により、ＲＯＭ３０３や磁気記憶装置３０４に格納されたプログラムが実行されることで、情報処理装置３００は、図１に示すように、受信部３１０、装置情報管理部３２０、ジョブ管理部３４０、ＡＲ生成部３６０、送信部３７０として機能する。また、情報処理装置３００に設けられた装置情報格納部３３０、ジョブリスト格納部３５０は、図２にて示した磁気記憶装置３０４により実現される。
【００２９】
ここで、ＣＰＵ３０１によって実行されるプログラムは、磁気記録媒体（磁気テープ、磁気ディスクなど）、光記録媒体（光ディスクなど）、光磁気記録媒体、半導体メモリなどのコンピュータが読取可能な記録媒体に記憶した状態で、情報処理装置３００へ提供しうる。また、ＣＰＵ３０１によって実行されるプログラムは、インターネットなどの通信手段を用いて情報処理装置３００へダウンロードしてもよい。
【００３０】
図３は、ＡＲ表示装置２００のハードウエアの構成を示した図である。
図３に示すように、ＡＲ表示装置２００は、ＣＰＵ（Central Processing Unit）２０１、ＲＡＭ（Random Access Memory）２０２、ＲＯＭ（Read Only Memory）２０３、磁気記憶装置２０４を備える。さらに、ＡＲ表示装置２００は、外部との通信を行うための通信インタフェース（通信Ｉ／Ｆ）２０５を備える。さらに、ＡＲ表示装置２００は、ＵＩ２０６、ディスプレイ２０７、カメラ２０８を備える。
【００３１】
ＲＯＭ２０３、磁気記憶装置２０４は、ＣＰＵ２０１により実行されるプログラムを記憶する。ＣＰＵ２０１は、ＲＯＭ２０３や磁気記憶装置２０４に記憶されているプログラムを読み出し、ＲＡＭ２０２を作業エリアにしてプログラムを実行する。
ＣＰＵ２０１により、ＲＯＭ２０３や磁気記憶装置２０４に格納されたプログラムが実行されることで、ＡＲ表示装置２００には、図１に示した、受信部２１１、解析部２１３、通信部２１４、画像表示制御部２１５、画像移動部２１６、画像切り替え部２１７の各機能部が実現される。また、図１にて示したＡＲ情報格納部２１２は、図３にて示した磁気記憶装置２０４により実現される。
【００３２】
ここで、ＣＰＵ２０１によって実行されるプログラムは、磁気記録媒体（磁気テープ、磁気ディスクなど）、光記録媒体（光ディスクなど）、光磁気記録媒体、半導体メモリなどのコンピュータが読取可能な記録媒体に記憶した状態で、ＡＲ表示装置２００へ提供しうる。また、ＣＰＵ２０１によって実行されるプログラムは、インターネットなどの通信手段を用いてＡＲ表示装置２００へダウンロードしてもよい。
【００３３】
図４は、ＡＲ表示装置２００が有するディスプレイ２０７に表示されたＡＲオブジェクトを示した図である。
本実施形態では、ユーザが、ＡＲ表示装置２００を通していずれかの用紙収容部１１０を見た場合に、ＡＲ表示装置２００のディスプレイ２０７に、用紙収容部１１０およびＡＲオブジェクトが表示される。
より具体的には、ユーザが、画像形成装置１００（図１参照）の本体部１００Ａから用紙収容部１１０を引き出し、さらに、この用紙収容部１１０を見た場合に、図４に示すＡＲオブジェクトが表示される。言い換えると、ディスプレイ２０７の背後に用紙収容部１１０が位置する状態にて、ユーザが、ディスプレイ２０７を見た場合、ディスプレイ２０７には、用紙収容部１１０が表示されるとともにＡＲオブジェクトが表示される。
【００３４】
ここで、各用紙収容部１１０には、図４に示すように、収容部マーカ１１２が付されている。収容部マーカ１１２は、例えば、２次元バーコードなどのコード画像により構成される。なお、以下の説明では、収容部マーカ１１２はユーザが使用予定の用紙を収容すべき用紙収容部１１０の位置を特定するための情報を取得するものとして扱われているが、位置を特定するにはマーカに限定されず、例えば、後述するように無線発信機を用いてもよい。
本実施形態では、図４に示すように、用紙収容部１１０が有する開口縁１１０Ｄのうちの、画像形成装置１００のフロント側に位置する部位に、収容部マーカ１１２が付されている。
【００３５】
そして、本実施形態では、画像形成装置１００の本体部１００Ａから用紙収容部１１０を引き出すと、この収容部マーカ１１２が現れる。また、用紙収容部１１０を本体部１００Ａに向けて押し出し、用紙収容部１１０を元の箇所に戻すと収容部マーカ１１２は隠れる。
なお、収容部マーカ１１２の位置は特に制限されず、他の箇所に設置してもよい、また、収容部マーカ１１２は、用紙収容部１１０に対して着脱できるようにし、ユーザが自由に張り替えられるようにしてもよい。また、収容部マーカ１１２は、用紙収容部１１０を引き出さずともユーザに見える場所に設置してもよい。
【００３６】
本実施形態では、図４に示すように、ユーザが、ＡＲ表示装置２００を通して、引き出した状態にある用紙収容部１１０を見ると、ＡＲオブジェクトとして、用紙収容部１１０に収容される用紙に対して形成される予定の画像である形成予定画像が表示される。
具体的には、画像表示制御部２１５（図１参照）が、形成予定画像についてのＡＲオブジェクトを、ＡＲ情報格納部２１２から読み出し、このＡＲオブジェクトに基づく画像を、ディスプレイ２０７に表示する。
これにより、ユーザは、用紙収容部１１０へ用紙を収容する際に、用紙を何れの方向に向けたらいいかを把握することができる（詳細は後述）。
【００３７】
図５（Ａ）、（Ｂ）は、用紙収容部１１０に収容される用紙、および、形成予定画像をそれぞれ示した図である。
ここで、この例では、用紙収容部１１０に対し、図５（Ａ）に示す年賀はがきが収容される場合を考える。年賀はがきは、いわゆるプレプリント紙であり、年賀はがきには、郵便番号記入欄５Ａや、切手の添付位置を示す画像５Ｂがすでに形成されている。
【００３８】
年賀はがきに対しては、例えば、図５（Ｂ）に示すような画像（以下、「形成予定画像５０」と称する）が形成される。
形成予定画像５０は、方向性を有し、年賀はがきに対して形成予定画像５０を形成するには、年賀はがきの向きが、形成予定画像５０の向きと同じとなるように、年賀はがきの向きを調整したうえで、用紙収容部１１０に年賀はがきを収容する。 
【００３９】
ここで、本実施形態では、図４に示すように、引き出された状態の用紙収容部１１０の上方に、形成予定画像５０を表すＡＲオブジェクトを表示する。
より具体的には、本実施形態では、ユーザがＡＲ表示装置２００を通して用紙収容部１１０を見た場合に、ＡＲ表示装置２００のディスプレイ２０７上に、年賀はがきに形成される予定の画像である形成予定画像５０を表示する。
【００４０】
図４に示すように、本実施形態では、形成予定画像５０として２つの形成予定画像を表示する。
具体的には、画像表示制御部２１５は、用紙の第１面側（表面側）に形成される予定の画像である第１面側形成予定画像５０Ａ、用紙の第２面側（裏面側）に形成される予定の画像である第２面側形成予定画像５０Ｂを表示する。
【００４１】
なお、この第１面側形成予定画像５０Ａ、第２面側形成予定画像５０Ｂは、情報処理装置３００（図１参照）のＡＲ生成部３６０により生成される。より具体的には、印刷ジョブに含まれる印刷データをラスタライズすることにより生成される。
さらに、本実施形態では、ＡＲ生成部３６０により、記録媒体画像の一例である用紙画像６０（用紙を表す画像）も生成され、図４に示すように、第１面側形成予定画像５０Ａと第２面側形成予定画像５０Ｂとの間に、この用紙画像６０も表示される。
【００４２】
本実施形態では、ユーザは、ＡＲ表示装置２００を通して用紙収容部１１０を眺めると、現実空間に位置する用紙収容部１１０に加え、ＡＲオブジェクトである、第１面側形成予定画像５０Ａ、第２面側形成予定画像５０Ｂ、用紙画像６０が見える。
そして、ユーザは、これらの画像を参照したうえで、用紙収容部１１０に対して年賀はがきをセットする。
【００４３】
年賀はがきをセットする際、ユーザは、第１面側形成予定画像５０Ａ、第２面側形成予定画像５０Ｂを参照することで、用紙収容部１１０に対して年賀はがきをセットする際の年賀はがきの向きを把握する。
具体的には、例えば、第１面側形成予定画像５０Ａに含まれる郵便番号の位置や、第１面側形成予定画像５０Ａや第２面側形成予定画像５０Ｂに含まれる文字の向きを参照することで、年賀はがきをセットする際の年賀はがきの向きを把握する。
【００４４】
さらに、ユーザは、第１面側形成予定画像５０Ａ、第２面側形成予定画像５０Ｂを参照することで、セットする年賀はがきの表裏を何れの方向に向ければよいかを把握する。
本例では、第１面側形成予定画像５０Ａに、郵便番号が含まれており、ユーザは、年賀はがきのセットにあたり、年賀はがき上の郵便番号記入欄５Ａ（図５（Ａ）参照）が上向きとなるように、年賀はがきをセットする。
【００４５】
本実施形態では、ユーザが、年賀はがきの向きと形成予定画像５０の向きが揃うように、また、年賀はがきの表裏の各々の内容と形成予定画像５０の内容とが合うように、年賀はがきの向きを調整した後、年賀はがきを用紙収容部１１０に収容する。
より具体的には、図４に示すように、用紙収容部１１０には、年賀はがきの位置決めに用いられるガイド部材１１９が設けられており、ユーザは、このガイド部材１１９により囲まれている領域内に、年賀はがきを収容する。
【００４６】
なお、上記では、第１面側形成予定画像５０Ａ、第２面側形成予定画像５０Ｂの２つの形成予定画像５０を表示したが、形成予定画像５０は、２つに限らず、第１面側形成予定画像５０Ａおよび第２面側形成予定画像５０Ｂの一方の形成予定画像５０のみを表示してもよい。
また、上記では、用紙画像６０を表示する場合を説明したが、用紙画像６０の表示は行わないでもよい。
【００４７】
また、用紙画像６０を生成する場合は、用紙画像６０の縦横の比率が、実際に使用される予定の用紙の縦横の比率と等しくなるように、用紙画像６０を生成することが好ましい。
また、用紙画像６０を表示する場合、形成予定画像５０と用紙画像６０との位置関係が、実際に印刷が行われる場合の位置関係と同じとなるように、形成予定画像５０、用紙画像６０を表示することが好ましい。
【００４８】
さらに、本実施形態では、形成予定画像５０を用紙収容部１１０に表示するにあたり、ユーザによる設定等も考慮に入れて、形成予定画像５０を表示する。
より具体的には、ユーザの設定等によっては、用紙上に形成される画像が９０°や１８０°回転したり、画像形成装置１００にて用紙が搬送されている過程で用紙が反転等したりする場合があり、本実施形態では、これらの設定も考慮に入れて、形成予定画像５０を生成し、この形成予定画像５０を用紙収容部１１０に表示する。
【００４９】
ここで、本実施形態では、用紙収容部１１０にて表示している形成予定画像５０をこの用紙収容部１１０にて用紙上に載せ（形成し）、さらに、形成予定画像５０を載せたこの用紙を画像形成部１２０まで搬送した場合を想定した場合、画像形成部１２０では、用紙収容部１１０にて用紙上に載せられたこの形成予定画像５０の向きと、画像形成部１２０にて実際に形成される画像の向きとが揃うことになる。
【００５０】
言い換えると、本実施形態では、画像形成部１２０による画像の形成が済んだ用紙（以下、「画像形成済み用紙」と称する）を、用紙の搬送経路に沿って画像形成部１２０から用紙収容部１１０まで戻した場合を想定した場合、用紙収容部１１０では、用紙収容部１１０にて表示される形成予定画像５０の向きと、画像形成済み用紙上の画像の向きとが揃うことになる。
これにより、本実施形態では、用紙収容部１１０にて、形成予定画像５０の向きに合わせて用紙の収容を行うと、この用紙上にすでに形成されている画像の向きと、画像形成部１２０にて実際に形成される画像の向きとが揃うようになる。
【００５１】
ここで、用紙への画像形成にあたっては、年賀はがきに対して、後から住所等を印字するように、既に画像形成が行われた用紙に対し、さらなる画像形成を行う場合がある。
また、記録媒体への画像形成にあたっては、形成される画像の厚みを増し立体感を付与等するために、用紙に対して、同じ形状の画像を複数回にわたって形成することもある。
【００５２】
このような場合、一般的な白紙の用紙を用いるのとは異なり、１回目の画像形成が既に済んだ用紙（以下、「印刷済み用紙」と称することがある）を用紙収容部１１０にセットすることになる。さらに、この場合、２回目の形成される形成予定画像５０の向きに合わせるため、印刷済み用紙を回転し、あるいは、印刷済み用紙の表裏を反転したうえで、印刷済み用紙を用紙収容部１１０にセットする必要が生じる。
【００５３】
ここで、本実施形態では、上記のように、ユーザがＡＲ表示装置２００を通して用紙収容部１１０を見た場合に、ＡＲ表示装置２００のディスプレイ２０７に、形成予定画像５０が表示される。
これにより、ユーザは、セットしようとする用紙に対して、形成予定画像５０がどのような状態で形成されるのかを把握することができる。そして、この場合、ユーザは、セットしようとする用紙の向きを調整したうえで用紙のセットを行うようになる。これにより、用紙が誤った状態でセットされることが抑制される。
【００５４】
なお、用紙が誤った状態でセットされることを抑制するための他の方法としては、用紙収容部１１０に実際にセットされた印刷済み用紙に既に形成されている画像（１回目の印刷が済んでいる用紙上の画像）をスキャン等で取得し、取得した画像と形成予定画像５０とを重ね合わせた合成画像を、画像形成装置１００（図１参照）のＵＩ１３０等に表示することも考えらえる。この場合、ユーザは、ＵＩ１３０上の画像を確認して、セットした用紙の向きと形成予定画像５０の向きとが揃っているかを確認する。
【００５５】
ところで、印刷済み用紙に既に形成されている画像は、一見しただけでは、その上下、左右を判別することが難しい場合があり、上記のように、ＵＩ１３０に、印刷済み用紙の画像を表示する場合、印刷済み用紙の向きの判別が難しくなりやすく、印刷済み用紙の向きと形成予定画像５０の向きとが揃っているか否かの判別も難しくなりやすい。そして、この場合、印刷済み用紙のセット誤りが起きやすくなる。
これに対して、本実施形態では、ユーザは、実物の印刷済み用紙を目視で確認しながら、印刷済み用紙の向きを把握する。この場合、上記のように、ＵＩ１３０を介して印刷済み用紙の向きを把握する場合に比べ、印刷済み用紙のセット誤りが起きにくくなる。
【００５６】
図６は、本実施形態の表示システム１にて実行される処理の流れを説明する図である。
本実施形態では、まず、情報処理装置３００（図１参照）のＵＩ３０６にて、情報処理装置３００のジョブリスト格納部３５０に格納されている印刷ジョブの一覧を表示する。
次いで、ユーザが、このＵＩ３０６を操作し、印刷ジョブの一覧の中から、印刷処理を行う印刷ジョブを選択し（ステップ１０１）、さらに、この印刷ジョブを、ＡＲ表示装置２００における表示対象として登録する。
【００５７】
図７は、情報処理装置３００のＵＩ３０６に表示される、印刷ジョブの一覧を示した図である。
ユーザは、図７に示す、この一覧の中から、印刷ジョブを選択する。さらに、ユーザは、選択したこの印刷ジョブを、ＡＲ表示装置２００における表示対象として登録する。
具体的には、ユーザは、図中右上に位置する「登録ボタン」を押圧することで、選択した印刷ジョブを、ＡＲ表示装置２００における表示対象として登録する。
【００５８】
なお、本実施形態では、登録ボタンを押圧して、印刷ジョブを登録する場合を説明したが、その他に、例えば、マウスの右クリックにより表示されるメニューに、「登録」の項目を用意しておき、この「登録」を選択する形としてもよい。
また、印刷ジョブの登録は、画像形成装置１００のＵＩ１３０やＡＲ表示装置２００のＵＩ２０６を介して行ってもよい。
【００５９】
印刷ジョブの登録が行われると、情報処理装置３００のＡＲ生成部３６０が、登録された印刷ジョブの解析を行う（ステップ１０２）。
次いで、この解析の結果を元に、生成手段としての機能するＡＲ生成部３６０が、ＡＲオブジェクトを生成する（ＡＲ表示装置２００に表示する表示画像を生成する）（ステップ１０３）。
【００６０】
ステップ１０２の解析処理では、ＡＲ生成部３６０は、印刷データ、用紙搬送路、用紙収容部１１０、用紙情報、原稿の向き、原稿の回転の有無、両面印刷の有無、面付け方法、排出面、用紙排出部、フィニッシング（後処理）の有無などの情報を解析する。なお、用紙情報の解析にあっては、用紙のサイズ、給紙の向き、用紙の種類、パンチ処理の有無、色、重さなどについての情報を解析する。
そして、ＡＲ生成部３６０は、ステップ１０３にて、これらの情報の解析結果に基づき、ＡＲオブジェクトを生成する。
【００６１】
ここで、ＡＲ生成部３６０により生成されるＡＲオブジェクトの向きは、一定ではなく、上記の解析に応じて変化する。
より具体的には、ＡＲ生成部３６０は、画像形成装置１００が形成予定画像５０を実際に用紙に形成する際のこの形成予定画像５０の向きに応じて、生成する画像の向きを変更する。
【００６２】
ここで、本実施形態では、形成予定画像５０が実際に用紙に形成されるにあたり、ユーザの設定によっては、この形成予定画像５０が回転されたうえで、用紙に形成予定画像５０が形成される場合がある。この場合、この回転を考慮せずに、ＡＲオブジェクトを生成してしまうと、用紙が誤った向きでセットされてしまう。このため、本実施形態では、形成予定画像５０の向きに応じて、生成するＡＲオブジェクトの向きを変更する。
【００６３】
なお、同様の理由で、ＡＲ生成部３６０は、用紙収容部１１０から画像形成部１２０への用紙の搬送に関する設定に応じて、生成するＡＲオブジェクトの向きを変更する。
用紙収容部１１０から画像形成部１２０へ用紙が搬送される際に、用紙が反転等される場合があり、この反転等を考慮せずにＡＲオブジェクトを生成すると、用紙が誤った向きでセットされてしまう。このため、ＡＲ生成部３６０は、上記と同様、用紙の搬送に関する設定に応じて、生成するＡＲオブジェクトの向きを変更する。
【００６４】
また、ＡＲ生成部３６０は、印刷ジョブの解析を行い、ＡＲオブジェクトの表示を行う用紙収容部１１０を決定する。
具体的には、印刷ジョブには、使用する用紙のサイズ情報が含まれており、ＡＲ生成部３６０は、このサイズ情報に基づき、ＡＲオブジェクトの表示対象となる用紙収容部１１０を決定する。
【００６５】
より具体的には、画像形成装置１００の用紙収容部１１０の各々には、各用紙収容部１１０に収容される用紙のサイズに関する情報が予め対応付けられており、情報処理装置３００の装置情報管理部３２０には、各用紙収容部１１０と用紙サイズとの対応関係が格納されている。
ＡＲ生成部３６０は、印刷ジョブに含まれる用紙サイズに関する情報と、装置情報格納部３３０に格納されている上記対応関係とに基づき、ＡＲオブジェクトの表示を行う用紙収容部１１０（以下、「表示対象収容部」と称することがある）を決定する。
具体的には、例えば、印刷ジョブに含まれる用紙サイズについての情報がＡ４であり、複数の用紙収容部１１０のうちの一の用紙収容部１１０がＡ４の用紙用として予め設定されている場合、ＡＲ生成部３６０は、この一の用紙収容部１１０を、表示対象収容部とする。
【００６６】
なお、用紙のサイズに限らず、用紙の紙質に関する紙質情報を用いて、表示対象収容部を決定してもよい。この場合は、装置情報格納部３３０には、各用紙収容部１１０と用紙の紙質に関する情報とを互いに対応づけた状態で格納しておく。そして、ＡＲ生成部３６０は、印刷ジョブに含まれる紙質に関する情報、および、装置情報格納部３３０に格納されている情報に基づき、表示対象収容部を決定する。
【００６７】
その後、情報処理装置３００の送信部３７０（図１参照）が、ステップ１０３にて生成されたＡＲオブジェクトを、ＡＲ表示装置２００に送信する（ステップ１０４）。なお、ＡＲ表示装置２００に送信される情報には、上記表示対象収容部についての情報も含まれる。
次いで、ユーザが、ＡＲ表示装置２００を通して、引き出された状態にある用紙収容部１１０を見ると、ＡＲ表示装置２００の解析部２１３が、この用紙収容部１１０を認識する（ステップ１０５）。
【００６８】
より具体的には、解析部２１３は、ＡＲ表示装置２００のカメラ２０８により得られた撮影画像を解析し、収容部マーカ１１２を検出することで、この収容部マーカ１１２が付された用紙収容部１１０を認識する。
なお、本実施形態では、収容部マーカ１１２を用いて用紙収容部１１０を識別するが、用紙収容部１１０の形状（用紙収容部１１０の全体又は一部の形状）を把握して、用紙収容部１１０の各々を識別してもよい。
【００６９】
その後、本実施形態では、解析部２１３が、ユーザがＡＲ表示装置２００を通して見ている用紙収容部１１０（収容部マーカ１１２に基づき識別された用紙収容部１１０）が、表示対象収容部（ＡＲオブジェクトを表示すべき用紙収容部１１０）であるか否かを判断する（ステップ１０６）。
そして、表示対象収容部であると判断された場合、画像表示制御部２１５が、ＡＲ表示装置２００のディスプレイ２０７に、この表示対象収容部に対応付けられているＡＲオブジェクトを表示する（ステップ１０７）。
言い換えると、本実施形態では、形成予定画像５０が用紙に対して実際に形成される際、複数の用紙収容部１１０のうちの一の用紙収容部１１０から用紙が送り出されることになるが、本実施形態では、この一の用紙収容部１１０が、表示対象収容部となり、この表示対象収容部に、ＡＲオブジェクトが表示される。
【００７０】
一方、ステップ１０６にて、表示対象収容部ではないと判断された場合（表示対象収容部以外の他の用紙収容部１１０をユーザが見た場合）、ＡＲオブジェクトの表示を行わずに、ステップ１０５、ステップ１０６の処理を再び行う。
そして、ステップ１０５にて、ＡＲ表示装置２００の解析部２１３が、新たな用紙収容部１１０を認識し、ステップ１０６にて、認識されたこの新たな用紙収容部１１０が表示対象収容部であると判断された場合は、ステップ１０７にて、この新たな用紙収容部１１０の上方に、ＡＲオブジェクトが表示される。
【００７１】
なお、ステップ１０６にて、ユーザがＡＲ表示装置２００を通して見ている用紙収容部１１０が、表示対象収容部ではないと判断された場合、ユーザに対し、ＡＲ表示装置２００を介して、警告表示等を行ってもよい。
具体的には、ユーザがＡＲ表示装置２００を通して見ている用紙収容部１１０が、表示対象収容部ではないと判断された場合、ユーザが見ているこの用紙収容部１１０が、表示対象収容部ではないことを示す情報を、ＡＲ表示装置２００に表示してもよい。
言い換えると、ユーザが、ＡＲ表示装置２００を通して、表示対象収容部以外の他の用紙収容部１１０を見た場合、用紙の収容先がこの他の用紙収容部１１０ではないことを示す情報を、ＡＲ表示装置２００に表示してもよい。
【００７２】
これにより、表示対象収容部が、ユーザにより視認される可能性が高まり、言い換えると、表示対象収容部が、画像形成装置１００の本体部１００Ａ（図１参照）から引き出される可能性が高まり、表示対象収容部に用紙が収容される可能性が高まる。
また、本実施形態では、表示対象収容部に、ＡＲオブジェクトが表示され、用紙の収容誤りも起きにくくなる。
【００７３】
また、ユーザが、表示対象収容部以外の他の用紙収容部１１０を見た場合、ＡＲ表示装置２００上に、表示対象収容部の位置を示す画像を表示し、表示対象収容部の位置をユーザに通知してもよい。
なお、表示対象収容部の位置を示す画像の表示にあたっては、表示対象収容部の位置を特定する必要があるが、この位置の特定は、例えば、ユーザが誤って引き出した用紙収容部１１０に基づき行う。
【００７４】
ここで、表示対象収容部の位置を示す画像の表示にあたり、この表示を行う時点では、表示対象収容部が本体部１００Ａから引き出されていないため、表示対象収容部に付された収容部マーカ１１２を検出できず、表示対象収容部の位置を特定できない。このため、この場合、表示対象収容部の位置の特定は、例えば、ユーザが誤って引き出した用紙収容部１１０に基づき行う。
より具体的には、表示対象収容部が未だ引き出されていない場合における、表示対象収容部の位置の特定は、ＡＲ情報格納部２１２に予め格納してある位置関係についての情報と、ユーザが誤って引き出した用紙収容部１１０とに基づき行う。
【００７５】
より具体的には、このような場合に備え、予め、ＡＲ情報格納部２１２に、各用紙収容部１１０の互いの位置関係についての情報を格納しておく。
そして、表示対象収容部以外の他の用紙収容部１１０をユーザが見た場合、ユーザはこの他の用紙収容部１１０についての情報（この他の用紙収容部１１０を識別する識別情報）と、ＡＲ情報格納部２１２に格納されている上記位置関係とに基づき、表示対象収容部の位置を把握する。
【００７６】
そして、ＡＲ表示装置２００は、把握したこの位置をユーザに通知する。具体的には、例えば、ＡＲ表示装置２００のディスプレイ２０７上に、表示対象収容部を指し示す矢印を表示して、表示対象収容部の位置をユーザに通知する。また、例えば、「２つ上の用紙収容部１１０を引き出してください」などの情報をユーザに通知し、表示対象収容部の位置をユーザに通知する。
【００７７】
図８は、ＡＲ表示装置２００における他の表示例を示した図である。なお、図８では、現実空間の図示を省略している。
上述した表示例では、第２面側形成予定画像５０Ｂは、下向きであり、第２面側形成予定画像５０Ｂの確認を行いにくい。
これ対し、図８にて示す表示例では、ＡＲ表示装置２００のディスプレイ２０７に表示されているＡＲオブジェクトを、３６０°回転できるようになっている。より具体的には、この表示例では、ユーザからの回転指示に応じ、ディスプレイ２０７上のＡＲオブジェクトが回転する。
【００７８】
これにより、ユーザは、当初の角度とは異なる角度から、第２面側形成予定画像５０Ｂの確認を行えるようになる。また、第１面側形成予定画像５０Ａや用紙画像６０も他の角度から視認でき、これらの画像の確認も行いやすくなる。
なお、本実施形態では、ＡＲオブジェクトを回転させる場合を説明したが、回転に限らず、当初の位置とは異なる位置へＡＲオブジェクトを移動させる処理としてもよい。
【００７９】
ここで、ユーザからの回転指示は、例えば、ＡＲ表示装置２００（図１参照）に対してなされる。より具体的には、ユーザは、例えば、ＡＲ表示装置２００に設けられたハードキーや、ディスプレイ２０７（タッチパネル）を操作することで、ＡＲオブジェクトの回転や移動の指示を行う。
また、ＡＲ表示装置２００にて、ユーザのジェスチャーの認識を行える場合は、ユーザは、予め定められた動作を行うことで、ＡＲオブジェクトの回転や移動の指示を行う。
【００８０】
そして、ユーザからの回転や移動の指示は、ＡＲ表示装置２００の画像移動部２１６（図１参照）に出力され、画像移動部２１６が、ＡＲ表示装置２００上のＡＲオブジェクトを回転させあるいは移動させる。より具体的には、ユーザからの指示があると、画像移動部２１６から画像表示制御部２１５に対して、ＡＲオブジェクトの回転指示や移動指示が出力され、これに応じ、画像表示制御部２１５が、ＡＲオブジェクトを回転させあるいは移動させる。
なお、図８に示す表示では、画面の右上に、デフォルトに戻すためのボタンが設けられており、このボタンがユーザにより押圧されると、ＡＲオブジェクトが、回転や移動する前の状態に戻る。
【００８１】
ここで、上記では、ＡＲ表示装置２００に、実際に用紙上に形成される予定の形成予定画像５０を表示したが、形成予定画像５０そのものではなく、形成予定画像５０から得られる情報を表示してもよい。
図９（Ａ）、（Ｂ）は、ＡＲ表示装置２００における他の表示例を示した図である。
上記では、図９（Ａ）に示すように、ＡＲ表示装置２００に表示するＡＲオブジェクトとして、実際に用紙上に形成される予定の形成予定画像５０を表示した。ところで、これに限らず、図９（Ｂ）に示すように、形成予定画像５０から得られる情報を表示してもよい。
【００８２】
図９（Ａ）に示すＡＲオブジェクトには、具体的な郵便番号、住所、名前が含まれているが、図９（Ｂ）に示すＡＲオブジェクトでは、郵便番号、住所、名前の各々の具体的な内容ではなく、各々の情報が何を示す情報であるかを表示する。言い換えると、各情報の種別を表示する。
図９（Ｂ）に示す表示例においても、ユーザは、用紙収容部１１０に用紙（年賀はがき）をセットする際に、この種別（種別の向きや位置）を参照することで、セットしようとする用紙を何れの方向に向ければよいかを把握することができる。
【００８３】
なお、各情報の種別の把握は、例えば、形成予定画像５０そのものを解析して、形成予定画像５０に含まれる各情報の種別を把握してもよい。
また、例えば、形成予定画像５０に含まれる各画像に、二次元バーコード等のコード画像（種別についての情報を格納したコード画像）を含ませておき（印刷ジョブを生成する際に、各画像に、二次元バーコード等のコード画像を含ませておき）、このコード画像を解析することで、形成予定画像５０に含まれる各情報の種別を把握してもよい。
【００８４】
また、ＡＲ表示装置２００における表示にあたっては、形成予定画像５０そのものではなく、図１０（ＡＲ表示装置２００における他の表示例を示した図）の（Ａ）に示すように、形成予定画像５０の向きを示す情報を表示してもよい。
なお、この形成予定画像５０の向きの表示にあたっては、形成予定画像５０の向きを把握する必要があるが、形成予定画像５０の向きは、例えば、印刷ジョブに含まれる画像データの向きに基づき把握することができる。また、例えば、形成予定画像５０の内容を解析して、形成予定画像５０の向きを把握してもよい。
【００８５】
図１０（Ａ）に示す表示例では、形成予定画像５０の上下を示す情報、形成予定画像５０の左右を示す情報を表示している。
より具体的には、形成予定画像５０の上下を示す情報として、「上」、「下」という文字を表示し、形成予定画像５０の左右を示す情報として、「左」、「右」という文字を表示している。
【００８６】
なお、この表示例では、上下を示す情報、左右を示す情報の２つの情報を表示したが、何れか一方の情報のみを表示してもよい。また、２つの情報の各々では、２つの文字を表示したが、１つの文字だけを表示してもよい。
具体的には、例えば、上下を示す情報として、上方向を示す「上」の１文字を表示してもよい。また、同様に、左右を示す情報として、例えば、左方向を示す「左」の１文字表示してもよい。
【００８７】
また、図１０（Ａ）に示す表示例では、形成予定画像５０の向きを示す情報として、形成予定画像５０が形成される記録媒体の表裏についての情報も表示している。具体的には、表面に定義される一面であることを示す「おもて」という文字と、裏面に定義される他方の面であることを示す「うら」という文字を表示している。
これにより、ユーザは、用紙収容部１１０に用紙を収容する際に、用紙の何れの面を上や下に向ければよいかを把握することができる。
【００８８】
さらに、この表示例では、形成予定画像５０の向きを示す情報として、「上」、「下」、「左」、「右」、「おもて」、「うら」のように、文字を表示している。文字は、それ自身が方向性を有しているため、ユーザは、文字の向きを把握することで、用紙をセットする際の用紙の向きを把握することができる。なお、この例では、「上」、「下」、「左」、「右」、「おもて」、「うら」で、合計９文字が表示されるが、１つの文字だけであっても、この１つの文字は方向性を有しているため、ユーザは、セットする用紙の向きを把握することができる。
【００８９】
また、形成予定画像５０の向きを示す情報としては、文字に限らず、図１０（Ｂ）に示すように、図形を表示してもよい。この例では、矢印を表示し、矢印が示す方向が「上」であることを指している。
【００９０】
また、ＡＲオブジェクトのサイズを変更してもよい。
具体的には、例えば、形成予定画像５０が形成される実際の用紙のサイズに合わせ、ＡＲオブジェクトのサイズを変更してもよい。
より具体的には、例えば、用紙のサイズが大きい場合には、ＡＲオブジェクトを大きくし、用紙のサイズが小さい場合には、ＡＲオブジェクトを小さくする。
【００９１】
なお、ＡＲオブジェクトの大きさを変える場合は、例えば、ＡＲ表示装置２００のＡＲ情報格納部２１２（図１参照）に、各サイズに対応した複数種類のＡＲオブジェクトを格納しておく。
そして、ＡＲオブジェクトの表示にあたっては、ＡＲ情報格納部２１２から、サイズに応じたＡＲオブジェクトを読み出し、ＡＲ表示装置２００のディスプレイ２０７に、このサイズに応じたＡＲオブジェクトを表示する。
【００９２】
また、上記では、１ページ目、２ページ目の形成予定画像５０を表示する場合を一例に説明したが、形成予定画像５０を、他のページに対応した形成予定画像５０に切り替えてもよい。
形成予定画像５０が複数ページに亘って形成される画像である場合、画像生成手段として機能するＡＲ生成部３６０（図１参照）は、複数ページ分の表示画像（ＡＲオブジェクト）を生成する。さらに、この複数ページ分の表示画像を、ＡＲ表示装置２００のＡＲ情報格納部２１２に格納しておく。
そして、ユーザからページ切り替えの指示があった場合、ＡＲ表示装置２００の画像切り替え部２１７が、ＡＲ表示装置２００にて表示されている形成予定画像５０を、他のページに対応した形成予定画像５０に切り替える。
【００９３】
ユーザは、より多くのページのＡＲオブジェクトを確認するほど、より精度良く、ＡＲオブジェクトの向きを把握することができる。
ＡＲオブジェクトの切り替えを行う場合、３ページ目以降のＡＲオブジェクトの確認を行えるようになり、１、２ページのＡＲオブジェクトのみが表示される場合に比べ、ユーザは、より精度良く、ＡＲオブジェクトの向きを把握することができる。
【００９４】
なお、ページの切り替えについてのユーザからの指示は、例えばＡＲ表示装置２００のＵＩ２０６に対してなされる。ページの切り替えについての指示がなされると、ＡＲ表示装置２００の画像切り替え部２１７が、ディスプレイ２０７に表示されているＡＲオブジェクトを、他のページに対応したＡＲオブジェクトに切り替える。
より具体的には、ページの切り替えの指示がユーザからなされると、画像切り替え部２１７は、画像表示制御部２１５に対して、ページを切り替える指示を行う。そして、本実施形態では、これに応じ、画像表示制御部２１５が、他のページに対応したＡＲオブジェクトを表示する。
【００９５】
また、形成予定画像５０の表示にあたり、上記では、１つの用紙収容部１１０に対して形成予定画像５０を表示し、他の用紙収容部１１０では、形成予定画像５０の表示を行わなかったが、この他の用紙収容部１１０でも、形成予定画像５０を表示してもよい。
【００９６】
但し、この場合は、図１１（ＡＲ表示装置２００における他の表示例を示した図）に示すように、用紙収容部１１０の各々にて、表示される形成予定画像５０の向きが異なる場合がある。
図１１（Ａ）では、一の用紙収容部１１０における形成予定画像５０を表示しているが、この形成予定画像５０では、宛名等の一方の面側に形成される画像が上側を向き、他方の面側に画像が下側を向く。
これに対し、図１１（Ｂ）に示すように、他の用紙収容部１１０では、宛名等の一方の面側に形成される画像が下側を向き、他方の面側に形成される画像が上側を向く。
【００９７】
上記のとおり、本実施形態では、ＡＲ生成部３６０は、用紙収容部１１０から画像形成部１２０への用紙の搬送に関する設定に応じて、生成するＡＲオブジェクトの向きを変更する。
ここで、上記一の用紙収容部１１０および上記他の用紙収容部１１０の何れかの用紙収容部１１０から画像形成部１２０への用紙の搬送の際に、用紙が反転等される場合がある。この場合は、生成されるＡＲオブジェクトの向きが変更され、用紙収容部１１０に応じ、表示されるＡＲオブジェクトの向きが異なるようになる。
【００９８】
また、１つの用紙収容部１１０に限らず、複数の用紙収容部１１０に対し、同時に、形成予定画像５０を表示してもよい。この場合、複数のサイズが混在した用紙への画像形成が行われる際の用紙の収容誤りを減らせる。
例えば、Ａ４サイズとＡ３サイズが混在した印刷物の出力を行う場合、Ａ４サイズの用紙がセットされる用紙収容部１１０と、Ａ３サイズの用紙がセットされる用紙収容部１１０のそれぞれに、形成予定画像５０を表示する。
【００９９】
また、ユーザがＡＲ表示装置２００のＵＩ２０６を操作することで、その際にＡＲ表示装置２００が認識している用紙収容部１１０を、印刷に用いる用紙収容部１１０として設定してもよい。
より具体的には、例えば、ＡＲ表示装置２００にて、何れかの用紙収容部１１０の上に形成予定画像５０を表示している際に、ユーザにより、例えば、ＡＲ表示装置２００上の「登録」ボタンの操作等があった場合に、この用紙収容部１１０を、印刷に用いる用紙収容部１１０として設定してもよい。
【０１００】
より具体的には、上記の例では、予め定められた１つの用紙収容部１１０に画像を表示する場合を説明したが、この処理例の場合は、この１つの用紙収容部１１０に限らず、何れかの用紙収容部１１０が引き出されたら、形成予定画像５０を表示する。
そして、ユーザは、この形成予定画像５０を参照し、引き出した用紙収容部１１０を、実際に使用する用紙収容部１１０とするか否かを判断する。そして、実際に使用する用紙収容部１１０とすると判断した場合、ユーザは、上記のとおり、「登録」ボタンの操作等を行う。これにより、この用紙収容部１１０が、印刷に用いる用紙収容部１１０として設定される。
【０１０１】
また、形成予定画像５０には、ブランク（白紙）のページが含まれる場合があり、この場合、形成予定画像５０の表示にあたっては、ブランクページであることを示すＡＲオブジェクトを表示することが好ましい。これにより、用紙のセット誤りをさらに減らせる。
【０１０２】
ここで、１つの同じ用紙収容部１１０に対して、複数の印刷ジョブに対応した用紙を収容する場合がある。かかる場合、ユーザは、上記にて説明したように、ページを順次切り替えていくことで、各印刷ジョブにより形成される各形成予定画像５０を確認できるようになる。
ところで、この場合に、ブランクのページを表示せず、例えば、形成予定画像５０を詰めて（繰り上げて）表示すると、表示される形成予定画像５０と、実際に印刷を行う用紙との対応関係がずれ、ユーザは、用紙をセットする際の用紙の向きを正しく判別できなくなるおそれがある。ブランクを表示するようにすれば、このずれが起きず、ユーザは、用紙をセットする際の用紙の向きの判別をより正しく行える。
【０１０３】
また、上記では、ＡＲオブジェクトを生成する機能等を情報処理装置３００に持たせたが、情報処理装置３００が有する機能を、ＡＲ表示装置２００に持たせ、ＡＲ表示装置２００にて、ＡＲオブジェクトの生成等も行ってよい。
また、上記では、用紙収容部１１０の特定にあたり、収容部マーカ１１２を用いたが、これに限らず、例えば無線発信機等を用いてもよい。より具体的には、用紙収容部１１０の各々に、各用紙収容部１１０を識別するための情報を発信する無線発信機を設け、無線発信機から発信される情報に基づき、用紙収容部１１０の特定を行ってもよい。
【符号の説明】
【０１０４】
１…表示システム、５０Ａ…第１面側形成予定画像、５０Ｂ…第２面側形成予定画像、６０…用紙画像、１１０…用紙収容部、１２０…画像形成部、２００…ＡＲ表示装置、２０７…ディスプレイ、２１４…通信部、２１５…画像表示制御部、２１６…画像移動部、２１７…画像切り替え部、３６０…ＡＲ生成部
【図１】
2018027638.tif 000003
【図２】
2018027638.tif 000004
【図３】
2018027638.tif 000005
【図４】
2018027638.tif 000006
【図５】
2018027638.tif 000007
【図６】
2018027638.tif 000008
【図７】
2018027638.tif 000009
【図８】
2018027638.tif 000010
【図９】
2018027638.tif 000011
【図１０】
2018027638.tif 000012
【図１１】
2018027638.tif 000013