(57)【特許請求の範囲】
【請求項１】
現実空間に画像を合成した拡張現実空間を表示する表示部と、
前記表示部が表示する前記拡張現実空間に対応した現実空間を撮影するカメラと、
所定の印刷装置が画像または出力用紙に施す予定の付加処理に関する設定内容を取得する設定情報取得部と、
前記カメラが撮影している前記現実空間に存在する用紙をその姿勢を含めて検出する検出部と、
前記設定情報取得部が取得した前記設定内容に従って前記印刷装置で前記付加処理を実施した場合の処理結果を模擬的に示す画像であって前記検出部によって検出された前記現実空間に存在する用紙の姿勢に合わせて補正した出力イメージ画像を生成し、該出力イメージ画像を前記現実空間に存在する用紙に重ね合わせた拡張現実空間を前記表示部に表示させる表示制御部と、
前記カメラの撮影映像から前記現実空間に存在する用紙の中の既に文字や画像が存在する領域である既存印字領域を検出する既存印字領域検出部と、
所定の付加処理に関する前記処理結果が前記既存印字領域と重なるか否かを判定し、重なる場合に、所定の警告を行う警告部と、
使用者の視線を検出する視線検出部を備え、
前記警告部は、前記警告を行うに際して前記使用者が前記用紙を見ているか否かを前記視線検出部の検出結果から判定し、前記使用者が前記用紙を見ている場合は、前記警告を前記表示部に表示させ、前記使用者が前記用紙を見ていない場合は、音声により前記警告を行う
ことを特徴とするＡＲ表示装置。
【請求項２】
前記表示制御部は、第１時点での前記用紙の姿勢と、前記第１時点とは異なる第２時点での前記用紙の姿勢とを比較し、当該比較の結果、前記第１時点での用紙の形状と前記第２時点での用紙の形状とが異なると判断する場合に、現実空間に存在する前記用紙の姿勢が変化したと判断して、前記第２時点での用紙の姿勢に合うように出力イメージ画像の形状を補正する
ことを特徴とする請求項１に記載のＡＲ表示装置。
【請求項３】
前記カメラの撮影映像から前記現実空間に存在する用紙の中の既に文字や画像が存在する領域である既存印字領域を検出する既存印字領域検出部を有し、
前記表示制御部は、所定の付加処理に関する前記処理結果が前記既存印字領域と重なるか否かを判定し、重なる部分と重ならない部分とを前記出力イメージ画像において異なる表示形態にする
ことを特徴とする請求項１または２に記載のＡＲ表示装置。
【請求項４】
前記カメラの撮影映像から前記現実空間に存在する用紙の中の既に文字や画像が存在する領域である既存印字領域を検出する既存印字領域検出部と、
所定の付加処理に関する前記処理結果が前記既存印字領域と重なるか否かを判定し、重なる場合は、前記付加処理に関する設定をユーザから受けた外部装置に対して、前記重なりの生じる付加処理に関する設定内容の変更操作をユーザから受けるように指示する設定変更指示部と
を有する
ことを特徴とする請求項１〜３のいずれか一項に記載のＡＲ表示装置。
【請求項５】
現実空間に画像を合成した拡張現実空間を表示する表示部と、前記表示部が表示する前記拡張現実空間に対応した現実空間を撮影するカメラとを備えたＡＲ表示装置の表示内容を制御するＡＲ表示制御装置であって、
所定の印刷装置が画像または出力用紙に施す予定の付加処理に関する設定内容を取得する設定情報取得部と、
前記カメラが撮影している前記現実空間に存在する用紙をその姿勢を含めて検出する検出部と、
前記設定情報取得部が取得した前記設定内容に従って前記印刷装置で前記付加処理を実施した場合の処理結果を模擬的に示す画像であって前記検出部によって検出された前記現実空間に存在する用紙の姿勢に合わせて補正した出力イメージ画像を生成し、該出力イメージ画像を前記現実空間に存在する用紙に重ね合わせた拡張現実空間を前記ＡＲ表示装置に表示させる表示制御部と、
前記カメラの撮影映像から前記現実空間に存在する用紙の中の既に文字や画像が存在する領域である既存印字領域を検出する既存印字領域検出部と、
所定の付加処理に関する前記処理結果が前記既存印字領域と重なるか否かを判定し、重なる場合に、所定の警告を行う警告部と、
使用者がどこを見ているかを示す視線情報を取得する視線情報取得部を備え、
前記警告部は、前記警告を行うに際して前記使用者が前記用紙を見ているか否かを前記視線情報に基づいて判定し、前記使用者が前記用紙を見ている場合は、前記警告を前記表示部に表示させ、前記使用者が前記用紙を見ていない場合は、音声により前記警告を行う
ことを特徴とするＡＲ表示制御装置。
【請求項６】
前記表示制御部は、第１時点での前記用紙の姿勢と、前記第１時点とは異なる第２時点での前記用紙の姿勢とを比較し、当該比較の結果、前記第１時点での用紙の形状と前記第２時点での用紙の形状とが異なると判断する場合に、現実空間に存在する前記用紙の姿勢が変化したと判断して、前記第２時点での用紙の姿勢に合うように出力イメージ画像の形状を補正する
ことを特徴とする請求項５に記載のＡＲ表示制御装置。
【請求項７】
前記カメラの撮影映像から前記現実空間に存在する用紙の中の既に文字や画像が存在する領域である既存印字領域を検出する既存印字領域検出部を有し、
前記表示制御部は、所定の付加処理に関する前記処理結果が前記既存印字領域と重なるか否かを判定し、重なる部分と重ならない部分とを前記出力イメージ画像において異なる表示形態にする
ことを特徴とする請求項５または６に記載のＡＲ表示制御装置。
【請求項８】
前記カメラの撮影映像から前記現実空間に存在する用紙の中の既に文字や画像が存在する領域である既存印字領域を検出する既存印字領域検出部と、
所定の付加処理に関する前記処理結果が前記既存印字領域と重なるか否かを判定し、重なる場合は、前記付加処理に関する設定をユーザから受けた外部装置に対して、前記重なりの生じる付加処理に関する設定内容の変更操作をユーザから受けるように指示する設定変更指示部と
を有する
ことを特徴とする請求項５〜７のいずれか一項に記載のＡＲ表示制御装置。
【請求項９】
請求項４に記載のＡＲ表示装置または請求項８に記載のＡＲ表示制御装置と、
前記付加処理に関する設定をユーザから受けると共に、前記設定変更指示部からの指示に従って、前記重なりの生じる付加処理に関する設定内容の変更操作をユーザから受ける設定装置と、
を含む
ことを特徴とする印刷条件設定システム。
【請求項１０】
請求項４に記載のＡＲ表示装置または請求項８に記載のＡＲ表示制御装置と、
前記付加処理に関する設定をユーザから受けると共に、前記設定変更指示部からの指示に従って、前記重なりの生じる付加処理に関する設定内容の変更操作をユーザから受ける設定部を備えた印刷装置と
を含む
ことを特徴とする印刷システム。
【請求項１１】
現実空間に画像を合成した拡張現実空間を表示する表示部と、前記表示部が表示する前記拡張現実空間に対応した現実空間を撮影するカメラとを備えたＡＲ表示装置に、所定の印刷装置が画像または出力用紙に施す予定の付加処理の設定内容を表示させる印刷設定表示方法であって、
前記設定内容を取得するステップと、
前記カメラが撮影している前記現実空間に存在する用紙をその姿勢を含めて検出するステップと、
前記設定内容に従って前記印刷装置で前記付加処理を実施した場合の処理結果を模擬的に示す画像であって前記検出した前記現実空間に存在する用紙の姿勢に合わせて補正した出力イメージ画像を生成し、該出力イメージ画像を前記現実空間に存在する用紙に重ね合わせた拡張現実空間を前記ＡＲ表示装置に表示させるステップと、
前記カメラの撮影映像から前記現実空間に存在する用紙の中の既に文字や画像が存在する領域である既存印字領域を検出するステップと、
所定の付加処理に関する前記処理結果が前記既存印字領域と重なるか否かを判定し、重なる場合に、所定の警告を行うステップと、
使用者がどこを見ているかを示す視線情報を取得するステップと、
前記警告を行うステップにおいて、前記使用者が前記用紙を見ているか否かを前記視線情報に基づいて判定し、前記使用者が前記用紙を見ている場合は、前記警告を前記表示部に表示させ、前記使用者が前記用紙を見ていない場合は、音声により前記警告を行うステップと、
を有する
ことを特徴とする印刷設定表示方法。
【請求項１２】
情報処理装置を、
請求項１乃至４のいずれか１つに記載のＡＲ表示装置もしくは請求項５乃至８のいずれか１つに記載のＡＲ表示制御装置として機能させる
ことを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、印刷装置が画像や出力用紙に施す予定の各種処理の処理結果を模擬的にイメージ化して表示する技術に関する。
【背景技術】
【０００２】
原稿をコピーする場合に、「極秘」などの文字をウォータマークとして合成したり、印刷後の用紙に、折り、綴じ、穴あけなどの後処理を施したりすることがある。このような付加処理を施す場合、ユーザは、その設定を、通常、印刷装置の操作パネルから行うが、自己の行った設定に従って作成される印刷物の仕上がり状態を印刷前にユーザ自身で正しくイメージすることは難しい。たとえば、ステイプルやパンチ穴と印刷される文字や画像との重なりの有無や位置関係を正しく認識することは難しい。
【０００３】
そこで、原稿をスキャナで読み取り、その読み取り画像が印刷された用紙にパンチ穴などの後処理を施した仕上がり状態のプレビュー画像を作成して操作パネルに表示する画像形成装置が提案されている（たとえば、特許文献１参照）。
【０００４】
また、サーバに登録された所定の画像を指定するＡＲ(Augmented Reality）タグを基本原稿に付加した印刷物を出力する画像形成装置と、この印刷物を撮像する携帯端末を含み、該印刷物を撮像した携帯端末が、該印刷物に付加されているＡＲタグに関連付けされている画像（たとえば：地図など）をサーバから取得し、その画像を、撮像画像中のＡＲタグの付近に重畳してＡＲ表示するシステムがある（たとえば、特許文献２参照。）
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００８−７０８３５号公報
【特許文献２】特開２０１３−０２６９２２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
上記の特許文献１に開示の画像形成装置では、仕上がり状態をプレビュー表示するためには、原稿をスキャナで読み取る必要があり、手間がかかる。また、操作パネルの小さい画面上では、正確な仕上がり状態を確認し難い。
【０００７】
特許文献２に開示の技術では、ＡＲタグに関連付けされている画像を撮像画像中のＡＲタグの付近に重畳してＡＲ表示するだけなので、印刷物を傾けたりすると、印刷物と画像の角度がずれてしまう。そのため、この技術を応用して、仕上がり状態の画像を用紙に重畳してＡＲ表示したとしても、用紙を正しい姿勢に保持しなければ、用紙と画像の角度がずれてしまい、ＡＲ表示で仕上がり状態を正しく確認することはできない。
【０００８】
本発明は、上記の問題を解決しようとするものであり、印刷物の仕上がり状態を容易に確認することのできるＡＲ表示装置、ＡＲ表示制御装置、印刷条件設定システム、印刷システム、印刷設定表示方法およびプログラムを提供することを目的としている。
【課題を解決するための手段】
【０００９】
かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。
【００１５】
［１］現実空間に画像を合成した拡張現実空間を表示する表示部と、
前記表示部が表示する前記拡張現実空間に対応した現実空間を撮影するカメラと、
所定の印刷装置が画像または出力用紙に施す予定の付加処理に関する設定内容を取得する設定情報取得部と、
前記カメラが撮影している前記現実空間に存在する用紙をその姿勢を含めて検出する検出部と、
前記設定情報取得部が取得した前記設定内容に従って前記印刷装置で前記付加処理を実施した場合の処理結果を模擬的に示す画像であって前記検出部によって検出された前記現実空間に存在する用紙の姿勢に合わせて補正した出力イメージ画像を生成し、該出力イメージ画像を前記現実空間に存在する用紙に重ね合わせた拡張現実空間を前記表示部に表示させる表示制御部と、
前記カメラの撮影映像から前記現実空間に存在する用紙の中の既に文字や画像が存在する領域である既存印字領域を検出する既存印字領域検出部と、
所定の付加処理に関する前記処理結果が前記既存印字領域と重なるか否かを判定し、重なる場合に、所定の警告を行う警告部と、
使用者の視線を検出する視線検出部を備え、
前記警告部は、前記警告を行うに際して前記使用者が前記用紙を見ているか否かを前記視線検出部の検出結果から判定し、前記使用者が前記用紙を見ている場合は、前記警告を前記表示部に表示させ、前記使用者が前記用紙を見ていない場合は、音声により前記警告を行う
ことを特徴とするＡＲ表示装置。
上記発明および下記［５］に記載の発明では、外部から取得した設定内容に従って印刷装置で付加処理を実施した場合の処理結果を模擬的に示す出力イメージ画像を作成し、これを、現実空間の用紙の姿勢に合わせて補正し、補正後の出力イメージ画像を現実空間に存在する用紙に重ね合わせた拡張現実空間をＡＲ表示する。これにより、ユーザは、設定内容にしたがって印刷装置で付加処理を施した場合の処理結果を事前に且つ容易に確認することができる。
また、設定内容が示す付加処理の中の所定の付加処理に関する処理結果が、現実空間に存在する用紙において既に文字や画像が存在する既存印字領域と重なる場合には、警告が行われる。この警告は、使用者が用紙を見ている場合は、表示による警告が行われ、使用者が用紙を見ていない場合は、音声による警告が行われる。
［２］前記表示制御部は、第１時点での前記用紙の姿勢と、前記第１時点とは異なる第２時点での前記用紙の姿勢とを比較し、当該比較の結果、前記第１時点での用紙の形状と前記第２時点での用紙の形状とが異なると判断する場合に、現実空間に存在する前記用紙の姿勢が変化したと判断して、前記第２時点での用紙の姿勢に合うように出力イメージ画像の形状を補正する
ことを特徴とする［１］に記載のＡＲ表示装置。
【００１６】
［３］前記カメラの撮影映像から前記現実空間に存在する用紙の中の既に文字や画像が存在する領域である既存印字領域を検出する既存印字領域検出部を有し、
前記表示制御部は、所定の付加処理に関する前記処理結果が前記既存印字領域と重なるか否かを判定し、重なる部分と重ならない部分とを前記出力イメージ画像において異なる表示形態にする
ことを特徴とする［１］または［２］に記載のＡＲ表示装置。
【００１７】
上記発明および下記［７］に記載の発明では、設定内容が示す付加処理の中の所定の付加処理に関する処理結果が、現実空間に存在する用紙の既存印字領域と重なる箇所と、重ならない箇所とを判別し、重なる箇所と重ならない箇所で、出力イメージ画像を異なる表示形態、たとえば、色を変えて、表示する。
【００１８】
［４］前記カメラの撮影映像から前記現実空間に存在する用紙の中の既に文字や画像が存在する領域である既存印字領域を検出する既存印字領域検出部と、
所定の付加処理に関する前記処理結果が前記既存印字領域と重なるか否かを判定し、重なる場合は、前記付加処理に関する設定をユーザから受けた外部装置に対して、前記重なりの生じる付加処理に関する設定内容の変更操作をユーザから受けるように指示する設定変更指示部と
を有する
ことを特徴とする［１］〜［３］のいずれか一項に記載のＡＲ表示装置。
【００１９】
上記発明および下記［８］に記載の発明では、設定内容が示す付加処理の中の所定の付加処理に関する処理結果が既存印字領域と重なる場合は、該付加処理に関する設定をユーザから受けた外部装置に対して、該付加処理に関する設定内容の変更操作をユーザから受けるように指示する。たとえば、該当の設定画面を表示するように指示する。
【００２２】
［５］現実空間に画像を合成した拡張現実空間を表示する表示部と、前記表示部が表示する前記拡張現実空間に対応した現実空間を撮影するカメラとを備えたＡＲ表示装置の表示内容を制御するＡＲ表示制御装置であって、
所定の印刷装置が画像または出力用紙に施す予定の付加処理に関する設定内容を取得する設定情報取得部と、
前記カメラが撮影している前記現実空間に存在する用紙をその姿勢を含めて検出する検出部と、
前記設定情報取得部が取得した前記設定内容に従って前記印刷装置で前記付加処理を実施した場合の処理結果を模擬的に示す画像であって前記検出部によって検出された前記現実空間に存在する用紙の姿勢に合わせて補正した出力イメージ画像を生成し、該出力イメージ画像を前記現実空間に存在する用紙に重ね合わせた拡張現実空間を前記ＡＲ表示装置に表示させる表示制御部と、
前記カメラの撮影映像から前記現実空間に存在する用紙の中の既に文字や画像が存在する領域である既存印字領域を検出する既存印字領域検出部と、
所定の付加処理に関する前記処理結果が前記既存印字領域と重なるか否かを判定し、重なる場合に、所定の警告を行う警告部と、
使用者がどこを見ているかを示す視線情報を取得する視線情報取得部を備え、
前記警告部は、前記警告を行うに際して前記使用者が前記用紙を見ているか否かを前記視線情報に基づいて判定し、前記使用者が前記用紙を見ている場合は、前記警告を前記表示部に表示させ、前記使用者が前記用紙を見ていない場合は、音声により前記警告を行う
ことを特徴とするＡＲ表示制御装置。
［６］前記表示制御部は、第１時点での前記用紙の姿勢と、前記第１時点とは異なる第２時点での前記用紙の姿勢とを比較し、当該比較の結果、前記第１時点での用紙の形状と前記第２時点での用紙の形状とが異なると判断する場合に、現実空間に存在する前記用紙の姿勢が変化したと判断して、前記第２時点での用紙の姿勢に合うように出力イメージ画像の形状を補正する
ことを特徴とする［５］に記載のＡＲ表示制御装置。
【００２３】
［７］前記カメラの撮影映像から前記現実空間に存在する用紙の中の既に文字や画像が存在する領域である既存印字領域を検出する既存印字領域検出部を有し、
前記表示制御部は、所定の付加処理に関する前記処理結果が前記既存印字領域と重なるか否かを判定し、重なる部分と重ならない部分とを前記出力イメージ画像において異なる表示形態にする
ことを特徴とする［５］または［６］に記載のＡＲ表示制御装置。
【００２４】
［８］前記カメラの撮影映像から前記現実空間に存在する用紙の中の既に文字や画像が存在する領域である既存印字領域を検出する既存印字領域検出部と、
所定の付加処理に関する前記処理結果が前記既存印字領域と重なるか否かを判定し、重なる場合は、前記付加処理に関する設定をユーザから受けた外部装置に対して、前記重なりの生じる付加処理に関する設定内容の変更操作をユーザから受けるように指示する設定変更指示部と
を有する
ことを特徴とする［５］〜［７］のいずれか一項に記載のＡＲ表示制御装置。
【００２５】
［９］［４］に記載のＡＲ表示装置または［８］に記載のＡＲ表示制御装置と、
前記付加処理に関する設定をユーザから受けると共に、前記設定変更指示部からの指示に従って、前記重なりの生じる付加処理に関する設定内容の変更操作をユーザから受ける設定装置と、
を含む
ことを特徴とする印刷条件設定システム。
【００２６】
［１０］［４］に記載のＡＲ表示装置または［８］に記載のＡＲ表示制御装置と、
前記付加処理に関する設定をユーザから受けると共に、前記設定変更指示部からの指示に従って、前記重なりの生じる付加処理に関する設定内容の変更操作をユーザから受ける設定部を備えた印刷装置と
を含む
ことを特徴とする印刷システム。
［１１］現実空間に画像を合成した拡張現実空間を表示する表示部と、前記表示部が表示する前記拡張現実空間に対応した現実空間を撮影するカメラとを備えたＡＲ表示装置に、所定の印刷装置が画像または出力用紙に施す予定の付加処理の設定内容を表示させる印刷設定表示方法であって、
前記設定内容を取得するステップと、
前記カメラが撮影している前記現実空間に存在する用紙をその姿勢を含めて検出するステップと、
前記設定内容に従って前記印刷装置で前記付加処理を実施した場合の処理結果を模擬的に示す画像であって前記検出した前記現実空間に存在する用紙の姿勢に合わせて補正した出力イメージ画像を生成し、該出力イメージ画像を前記現実空間に存在する用紙に重ね合わせた拡張現実空間を前記ＡＲ表示装置に表示させるステップと、
前記カメラの撮影映像から前記現実空間に存在する用紙の中の既に文字や画像が存在する領域である既存印字領域を検出するステップと、
所定の付加処理に関する前記処理結果が前記既存印字領域と重なるか否かを判定し、重なる場合に、所定の警告を行うステップと、
使用者がどこを見ているかを示す視線情報を取得するステップと、
前記警告を行うステップにおいて、前記使用者が前記用紙を見ているか否かを前記視線情報に基づいて判定し、前記使用者が前記用紙を見ている場合は、前記警告を前記表示部に表示させ、前記使用者が前記用紙を見ていない場合は、音声により前記警告を行うステップと、
を有する
ことを特徴とする印刷設定表示方法。
【００２８】
［１２］情報処理装置を、
［１］乃至［４］のいずれか１つに記載のＡＲ表示装置もしくは［５］乃至［８］のいずれか１つに記載のＡＲ表示制御装置として機能させる
ことを特徴とするプログラム。
【発明の効果】
【００２９】
本発明に係るＡＲ表示装置、ＡＲ表示制御装置、印刷条件設定システム、印刷システム、印刷設定表示方法およびプログラムによれば、拡張現実空間において印刷物の仕上がり状態を事前に容易に確認することができる。
【図面の簡単な説明】
【００３０】
【図１】本発明の実施の形態に係る印刷システムの構成を示す図である。
【図２】本発明の実施の形態に係る印刷システムに含まれる画像形成装置の概略構成を示すブロック図である。
【図３】本発明の実施の形態に係る印刷システムに含まれるＡＲ表示装置としてのヘッドマウントディスプレイ装置の外観を示す図である。
【図４】本発明の実施の形態に係る印刷システムに含まれるＡＲ表示装置としてのヘッドマウントディスプレイ装置の構成を示すブロック図である。
【図５】本発明の実施の形態に係る印刷システムに含まれるＡＲ表示装置としての携帯端末の概略構成を示すブロック図である。
【図６】現実の用紙と、ウォータマークを付加する出力設定に対応する出力イメージ画像が重畳された拡張現実空間の用紙を示す図である。
【図７】現実の用紙と、中折りの出力設定に対応する出力イメージ画像が重畳された拡張現実空間の用紙を示す図である。
【図８】現実の用紙と、三つ折りの出力設定に対応する出力イメージ画像が重畳された拡張現実空間の用紙を示す図である。
【図９】現実の用紙と、四つ折りの出力設定に対応する出力イメージ画像が重畳された拡張現実空間の用紙を示す図である。
【図１０】現実の用紙と、Ｚ折りの出力設定に対応する出力イメージ画像が重畳された拡張現実空間の用紙を示す図である。
【図１１】現実の用紙と、コピー時の画像欠け範囲の出力設定に対応する出力イメージ画像が重畳された拡張現実空間の用紙を示す図である。
【図１２】現実の用紙と、コピー時の画像欠け範囲の出力設定に対応する出力イメージ画像が重畳された拡張現実空間の用紙の他の例を示す図である。
【図１３】現実の用紙と、コピー時の画像欠け範囲の出力設定に対応する出力イメージ画像が重畳された拡張現実空間の用紙の他の例を示す図である。
【図１４】現実の用紙と、地紋画像の出力設定に対応する出力イメージ画像が重畳された拡張現実空間の用紙を示す図である。
【図１５】現実の用紙と、潜像が顕在化された地紋画像に対応する出力イメージ画像が重畳された拡張現実空間の用紙の他の例を示す図である。
【図１６】現実の用紙と、センター消去の出力設定に対応する出力イメージ画像が重畳された拡張現実空間の用紙を示す図である。
【図１７】現実の用紙と、枠消去の出力設定に対応する出力イメージ画像が重畳された拡張現実空間の用紙を示す図である。
【図１８】現実の用紙と、ステイプルの出力設定に対応する出力イメージ画像が重畳された拡張現実空間の用紙を示す図である。
【図１９】現実の用紙と、パンチ穴の出力設定に対応する出力イメージ画像が重畳された拡張現実空間の用紙を示す図である。
【図２０】ヘッドマウントディスプレイ装置が行う処理の全体を示す流れ図である。
【図２１】図２０の続きを示す流れ図である。
【図２２】用紙サイズの管理テーブルを示す図である。
【図２３】出力イメージ画像を作成する処理を示す流れ図である。
【図２４】重なりに関する警告を行う処理を示す流れ図である。
【図２５】ヘッドマウントディスプレイ装置から指示された設定画面に表示を切り替える画像形成装置の処理を示す流れ図である。
【図２６】ＡＲ表示制御装置の概略構成を示すブロック図である。
【発明を実施するための形態】
【００３１】
以下、図面に基づき本発明の実施の形態を説明する。
【００３２】
図１は、本発明の実施の形態に係る印刷システム３の構成を示している。印刷システム３は、画像形成装置１０と、ＡＲ(Augmented Reality）表示装置としてのヘッドマウントディスプレイ（ＨＭＤ）装置３０と、同じくＡＲ表示装置としての携帯端末６０と、ＡＲ表示制御装置１３０をＬＡＮ（Local Area Network）などのネットワーク２に接続して構成される。ヘッドマウントディスプレイ装置３０および携帯端末６０は、無線でネットワーク２と接続される。ＡＲ表示装置はヘッドマウントディスプレイ装置３０と携帯端末６０のいずれか一方でもかまわない。
【００３３】
画像形成装置１０は、原稿を光学的に読み取ってその複製画像を記録紙に印刷するコピー機能、読み取った原稿の画像データをファイルにして保存したり外部端末へネットワーク２を通じて送信したりするスキャン機能、外部のＰＣ（Personal Computer）などからネットワーク２を通じて受信した印刷データに係る画像を記録紙上に形成して印刷出力するプリンタ機能、ファクシミリ手順に従って画像データを送受信するファクシミリ機能などを備えた、所謂、複合機（ＭＦＰ）である。画像形成装置１０は、少なくとも用紙に画像を印刷するコピー機能（印刷装置としての機能）を備えていればよい。
【００３４】
画像形成装置１０は、画像や用紙に対して各種の付加処理を施す機能を備えている。たとえば、画像に対する付加処理には、印刷対象の画像にウォータマーク等のスタンプの画像を付加する処理や地紋画像を付加する処理、本などを見開いてコピーしたときに中央に生じる影を消去するセンター消去処理、原稿の周囲（たとえば、プラテンカバーを開いて原稿をコピーした場合に原稿の周囲に生じる黒い部分）を消去する枠消し処理、コピー時に用紙の周縁で画像の欠ける範囲を設定された画像欠け範囲にする処理などがある。
【００３５】
また、用紙に対する付加処理（所謂、後処理）としては、複数枚の用紙をステイプルで綴じる処理、パンチで穴を開ける処理、用紙に折り目を付ける処理などがある。このような画像や用紙に対する付加処理に関する設定を、以後、出力設定と呼ぶこととする。
【００３６】
ＡＲ表示装置（ヘッドマウントディスプレイ装置３０や携帯端末６０）は、画像形成装置１０に対する出力設定の内容を示す出力設定情報を画像形成装置１０等から取得する。そして、ＡＲ表示装置は、該出力設定情報が示す付加処理を画像形成装置１０で実施した場合の処理結果を模擬的に示す出力イメージ画像を作成し、これを現実空間の用紙に重ね合わせた拡張現実空間を表示する機能を備えている。
【００３７】
たとえば、画像形成装置１０に対して二つ折りの出力設定が成されている状態で、ヘッドマウントディスプレイ装置３０を装着したユーザが現実空間の用紙（たとえば、ユーザが手に持っている用紙）を見たとき、ヘッドマウントディスプレイ装置３０は、二つ折りの折り目に相当する出力イメージ画像を現実空間の用紙に重ね合わせた拡張現実空間を表示する。ヘッドマウントディスプレイ装置３０を装着したユーザはこの拡張現実空間を見る。
【００３８】
現実空間の用紙は、ユーザが手で持っている等の場合には、移動したり傾いたりする。また、現実空間の用紙は曲げられたりすることもある。そこで、本実施の形態に係るＡＲ表示装置（ヘッドマウントディスプレイ装置３０や携帯端末６０）は、現実空間にある用紙の位置および姿勢（向き、形状など）を検出し、傾いたり曲げられたりしている用紙に合わせて出力イメージ画像を補正し、該補正後の出力イメージ画像を現実空間の用紙に重ね合わせた拡張現実空間を表示する。
【００３９】
すなわち、用紙の表面に沿って出力イメージ画像が張り付いているような拡張現実空間が表示される。言い換えると、現実の用紙の姿勢にかかわらず、現実の用紙に付加処理が施されたような状態で出力イメージ画像が表示される。
【００４０】
これにより、ユーザは、用紙の位置や姿勢にかかわらず、設定した付加処理が実際に施された用紙があたかも現実空間に存在するような拡張現実空間をＡＲ表示装置で見ることができる。たとえば、円柱などの立体物に用紙を貼り付けた状態での処理結果を事前に確認することができる。また、ＡＲ表示装置は、上記の検出と補正を繰り返し行うので、ユーザが用紙を動かしても、その動きに追従して補正された出力イメージ画像が、現実空間の用紙に重畳して表示される。
【００４１】
なお、画像形成装置１０に対する出力設定は、画像形成装置１０の操作パネルで行うほか、外部端末や任意の携帯端末で行われる構成でもよく、この場合、ＡＲ表示装置は、出力設定の行われた外部端末や携帯端末から出力設定情報を取得する。なお、ＡＲ表示装置である携帯端末６０で出力設定を行う構成でもかまわない。
【００４２】
図２は、画像形成装置１０の概略構成を示すブロック図である。画像形成装置１０は、当該画像形成装置１０の動作を統括的に制御するＣＰＵ(Central Processing Unit)１１を有している。ＣＰＵ１１にはバスを通じてＲＯＭ(Read Only Memory)１２、ＲＡＭ(Random Access Memory)１３、不揮発メモリ１４、ハードディスク装置１５、自動原稿搬送部（ＡＤＦ：Auto Document Feeder）１６、認証部１７、操作部２０、表示部２１、ネットワーク通信部２２、画像読取部２３、画像処理部２４、プリンタ部２５、ファクシミリ通信部２６などが接続されている。
【００４３】
ＣＰＵ１１は、ＯＳ（Operating System）プログラムをベースとし、その上で、ミドルウェアやアプリケーションプログラムなどを実行する。ＲＯＭ１２には、各種のプログラムが格納されており、これらのプログラムに従ってＣＰＵ１１が各種処理を実行することで画像形成装置１０の各機能が実現される。
【００４４】
ＲＡＭ１３は、ＣＰＵ１１がプログラムに基づいて処理を実行する際に各種のデータを一時的に格納するワークメモリや画像データを格納する画像メモリなどとして使用される。
【００４５】
不揮発メモリ１４は、電源をオフにしても記憶内容が破壊されないメモリ（フラッシュメモリ）であり、各種設定情報の保存などに使用される。ハードディスク装置１５は大容量不揮発の記憶装置であり、印刷データ、画像データなどのほか各種のプログラムやデータが記憶される。
【００４６】
画像読取部２３は、原稿を光学的に読み取って画像データを取得する機能を果たす。画像読取部２３は、例えば、原稿に光を照射する光源と、その反射光を受けて原稿を幅方向に１ライン分読み取るラインイメージセンサと、ライン単位の読取位置を原稿の長さ方向に順次移動させる移動ユニットと、原稿からの反射光をラインイメージセンサに導いて結像させるレンズやミラーなどからなる光学経路と、ラインイメージセンサの出力するアナログ画像信号をデジタルの画像データに変換する変換部などを備えて構成される。
【００４７】
自動原稿搬送部１６は、原稿台にセットされた原稿をその最上のものから１枚ずつ順に繰り出して搬送し、画像読取部２３の読み取り位置を通過させて所定の排紙位置へ排紙する機能を果たす。また、原稿の表裏を自動的に反転させる機能を有し、これにより原稿の両面自動読み取りを可能にする。画像読取部２３は、プラテンガラス上に載置された原稿を読み取る機能と、自動原稿搬送部１６によって搬送される原稿を順次読み取る機能を備えている。
【００４８】
認証部１７は、画像形成装置１０を使用するユーザを認証する。認証方法は、パスワード、指紋、静脈など任意でよい。
【００４９】
操作部２０と表示部２１はユーザからジョブの投入などの操作を受ける操作パネルを構成する。画像形成装置１０は操作パネルにて前述した出力設定（付加処理に係る設定）をユーザから受け付ける。表示部２１は、液晶ディスプレイ（ＬＣＤ…Liquid Crystal Display）などで構成され、各種の操作画面、設定画面などを表示する機能を果たす。操作部２０は、スタートボタンなどの各種操作スイッチと、表示部２１の物理的画面上に設けられたタッチパネルとを備えている。タッチパネルは、表示部２１の物理的画面がタッチペンや指などで接触操作された座標位置を検出する。
【００５０】
ネットワーク通信部２２は、ＬＡＮなどのネットワーク２を通じてヘッドマウントディスプレイ装置３０や携帯端末６０などのＡＲ表示装置のほか、ＰＣやサーバなどの外部装置と通信する機能を果たす。
【００５１】
画像処理部２４は、画像の拡大縮小、回転などの処理のほか、印刷データをイメージデータに変換するラスタライズ処理、画像データの圧縮、伸張処理などを行う。
【００５２】
プリンタ部２５は、画像データに応じた画像を記録紙上に画像形成する機能を果たす。ここでは、記録紙の搬送装置と、感光体ドラムと、帯電装置と、レーザーユニットと、現像装置と、転写分離装置と、クリーニング装置と、定着装置とを有し、電子写真プロセスによって画像形成を行う、所謂、レーザープリンタとして構成されている。画像形成は他の方式でもかまわない。プリンタ部２５は、さらに、印刷後の用紙をステイプルで綴じる、パンチ穴を開ける、折るなどの後処理を施す機能を備えている。
【００５３】
ファクシミリ通信部２６は、ファクシミリ機能を備えた外部装置と電話回線を通じて画像データを送受信する機能を果たす。
【００５４】
図３は、ヘッドマウントディスプレイ装置３０の概略構成を示している。ヘッドマウントディスプレイ装置３０は、眼鏡に類似した形を成しており、人の頭に装着されて使用される。本例のヘッドマウントディスプレイ装置３０は、外の様子にハーフミラーで画像を重ね合わせる方式（所謂、光透過型）を採用している。
【００５５】
ヘッドマウントディスプレイ装置３０は、装着時に装着者の左右の目の前にそれぞれ配置される表示部３１と、左右の表示部３１をそれらの間で繋ぐブリッジ３２と、ブリッジ３２で連結された左右の表示部３１の両脇から同一方向に延びて装着者の耳に引っ掛けられるツル３３などを備えている。
【００５６】
また、表示部３１の両脇には、制御回路、投影部４６、カメラ部４７などを含む基幹部３４が設けられている。また各表示部３１の前方に位置するようにハーフミラー３５が、左右の基幹部３４から延びる支持腕に支持されている。
【００５７】
ハーフミラー３５は前方から表示部３１に向けて入射する光Ｌ１に対して４５度の角度で傾斜して設けてあり、基幹部３４の投影部４６は、画像（拡張現実感情報の画像光Ｌ２とする）をハーフミラー３５に向けて投影する。ハーフミラー３５は透明基板（ガラス基板）に、反射膜（金属膜と誘電体膜）をコーティングして構成されている。ハーフミラー３５は、たとえば、透過と反射の光量比が１：１になっている。
【００５８】
ヘッドマウントディスプレイ装置３０の装着者の目は、外光Ｌ１と画像光Ｌ２とが１：１の割合で合成された光が表示部３１を通じて入射する。すなわち、ヘッドマウントディスプレイ装置３０の装着者は、外の様子と投影部４６が投影した画像とを半々の透過率で重ね合わせた様子を見る。
【００５９】
図４は、ヘッドマウントディスプレイ装置３０の構成を示すブロック図である。ヘッドマウントディスプレイ装置３０は、制御部としてのＣＰＵ４１にバスを介してＲＯＭ４２、ＲＡＭ４３、不揮発メモリ４４、方位センサー部４５、投影部４６、カメラ部４７、操作部４８、表示部３１、ネットワーク通信部５１、画像処理部５２、視線検出部５３、距離センサ５４、音声出力部５５などを接続して構成される。
【００６０】
ＣＰＵ４１はＲＯＭ４２や不揮発メモリ４４に格納されているプログラムに従ってヘッドマウントディスプレイ装置３０の動作を制御する。ＲＯＭ４２にはプログラムや固定データが記憶されている。ＲＡＭ４３はＣＰＵ４１がプログラムを実行する際に各種のデータを一時的に格納するワークメモリなどとして使用される。不揮発メモリ４４には、各種の設定情報やアプリケーションプログラムなどが記憶される。
【００６１】
方位センサー部４５は、ヘッドマウントディスプレイ装置３０の向きや姿勢およびその変化を検出する。方位センサー部４５は、複数の地磁気センサと、複数の加速度センサを組み合わせて構成される。方位センサー部４５は、ヘッドマウントディスプレイ装置３０の装着者の姿勢や装着者が向いている方向や角度（これらは、カメラ部４７が撮影している方向や向きと一致）を検出したり、ヘッドマウントディスプレイ装置３０が傾けられたりした場合の動作の向きや速さを検出したりして、その検出結果をＣＰＵ４１へ通知する。ＣＰＵ４１は、方位センサー部４５からの通知に基づいて、ヘッドマウントディスプレイ装置３０の装着者の姿勢、角度、傾けられたりした動作の向きや速さを認識する。
【００６２】
投影部４６は前述したように、投影対象の画像（拡張現実感情報の画像光Ｌ２とする）をハーフミラー３５に向けて投影する。
【００６３】
カメラ部４７は、ヘッドマウントディスプレイ装置３０の前方を撮影する。より詳細には、装着者が前方を見たときの視野とほぼ同じ範囲を撮影する。カメラ部４７は、左右の基幹部３４にそれぞれ設けられてもよいし、いずれか一方のみに設けられてもよい。カメラ部４７は動画を撮影し、たとえば、毎秒３０フレームの画像を取り込む。
【００６４】
操作部４８は基幹部３４等に設けられたスイッチ等であり、投影画像の明るさなどの調整に使用される。
【００６５】
ネットワーク通信部５１は、無線ＬＡＮを含むネットワーク２を通じて画像形成装置１０などの外部装置と通信する機能を果たす。
【００６６】
画像処理部５２は、投影部４６からハーフミラー３５を介して表示部３１へ投影する画像（前述した出力イメージ画像など）の作成、該画像の補正（拡大・縮小、変形）などを行う、もしくはＣＰＵ４１と共同して行う。
【００６７】
視線検出部５３は、ヘッドマウントディスプレイ装置３０を装着しているユーザの視線（どこを見ているか）を検出する。視線の検出方法は任意でよい。たとえば、装着者の目を撮影するカメラを設け、このカメラが撮影した画像を解析し、目や瞳の位置、向きなどから装着者の視線を検出する。ヘッドマウントディスプレイ装置３０は、視線検出部５３で装着者の視線を検出することにより、当該ヘッドマウントディスプレイ装置３０の装着者が見ている箇所を認識する。
【００６８】
距離センサ５４は、ヘッドマウントディスプレイ装置３０からカメラ部４７の撮影範囲にある各種物体までの距離やヘッドマウントディスプレイ装置３０の装着者が見ている物体までの距離を計測する。距離センサ５４は、たとえば、超音波センサで構成される。
【００６９】
音声出力部５５は、警告を音声として出力する場合などに使用される。
【００７０】
ヘッドマウントディスプレイ装置３０は、カメラ部４７の撮影映像を解析して該撮影映像の中に存在する用紙をその位置と姿勢を含めて検出する。また、検出した用紙までの距離を距離センサ５４で計測し、計測結果の距離と撮影映像中の用紙の大きさとから、現実の用紙のサイズを認識する。さらに、距離センサ５４で用紙の各部までの距離を計測してこれらを集計・解析することで、ヘッドマウントディスプレイ装置３０側から見た用紙の三次元形状（傾き、曲がり、折れなど）も認識する。たとえば、三次元形状の認識は、特開２００８−２６２４３号公報などに開示されている公知技術を利用することができる。なお、カメラ部４７をステレオカメラとし、用紙の姿勢やヘッドマウントディスプレイ装置３０側から見た三次元形状を該ステレオカメラの映像を解析して認識してもよい。
【００７１】
図５は、携帯端末６０の概略構成を示している。携帯端末６０は、ＣＰＵ６１にバスを介してＲＯＭ６２、ＲＡＭ６３、不揮発メモリ６４、方位センサー部６５、カメラ部６６、認証部６７、操作部６８、表示部６９、ネットワーク通信部７０、画像処理部７１、視線検出部７２、距離センサ７３、音声出力部７４などを接続して構成される。
【００７２】
ＣＰＵ６１はＲＯＭ６２や不揮発メモリ６４に格納されているプログラムに従って携帯端末６０の動作を制御する。ＲＯＭ６２にはプログラムや固定データが記憶されている。ＲＡＭ６３はＣＰＵ６１がプログラムを実行する際に各種のデータを一時的に格納するワークメモリなどとして使用される。不揮発メモリ６４には、各種の設定情報やアプリケーションプログラムが記憶される。
【００７３】
方位センサー部６５は、携帯端末６０の向きや姿勢、およびそれらの変化を検出する。方位センサー部６５はヘッドマウントディスプレイ装置３０の方位センサー部４５と同様の構成である。
【００７４】
カメラ部６６は携帯端末６０の裏面側に設けられて携帯端末６０の裏面が臨む方向を撮影する。カメラ部６６は動画を撮影でき、たとえば、毎秒３０フレームの画像を取り込む。
【００７５】
認証部６７は、当該携帯端末６０の使用者を認証する。認証方法は、パスワード、指紋、静脈など任意でよい。
【００７６】
表示部６９は液晶ディスプレイなどで構成される。操作部６８は表示部６９の物理的画面上に設けられたタッチパネルなどで構成される。
【００７７】
ネットワーク通信部７０は、無線ＬＡＮを含むネットワーク２を通じて画像形成装置１０などの外部装置と通信する機能を果たす。
【００７８】
画像処理部７１は、カメラ部６６の撮影映像に合成する画像（前述した出力イメージ画像など）の作成、該画像の補正（拡大・縮小、変形）などを行うもしくはＣＰＵ６１と共同して行う。
【００７９】
視線検出部７２は、携帯端末６０のユーザの視線（どこを見ているか）を検出する。視線の検出方法は任意でよい。たとえば、使用者の顔や目を撮影するカメラを設け、このカメラが撮影した画像を解析し、顔、目や瞳の位置、向きなどからユーザの視線を検出する。携帯端末６０は、視線検出部７２でユーザの視線を検出することにより、当該携帯端末６０の使用者がどこを見ているかを認識する。
【００８０】
距離センサ７３は、携帯端末６０からカメラ部６６の撮影範囲にある各種物体までの距離や携帯端末６０のユーザが見ている物体までの距離を計測する。距離センサ７３は、ヘッドマウントディスプレイ装置３０の距離センサ５４と同様に、超音波センサなどで構成される。
【００８１】
音声出力部７４は、警告を音声として出力する場合などに使用される。
【００８２】
なお、ヘッドマウントディスプレイ装置３０では現実空間からの情報に出力イメージ画像を重ねて表示するが、携帯端末６０の場合には、カメラ部６６が撮影している画像内の用紙に出力イメージ画像を重ねあわせた画像を表示部６９に表示する。使用者は携帯端末６０の表示部６９に表示された拡張現実空間を見ることになる。また、使用者が用紙を見ているか否かの判定として、携帯端末６０では、使用者が表示部６９を見ているか否かを判定すればよい。
【００８３】
次に、ＡＲ表示装置の動作を説明する。
【００８４】
ここでは、ヘッドマウントディスプレイ装置３０を例に説明する。
【００８５】
以下の図６〜図１９では、画像形成装置１０に対して所定の出力設定を行った状態でヘッドマウントディスプレイ装置３０の装着者が見る拡張現実空間の用紙（出力設定後の用紙とする）と、これに対応する現実空間の用紙（出力設定前の用紙とする）とを対比して示す。出力設定後の用紙は、現実空間の用紙に出力イメージ画像が重畳されたものである。
【００８６】
図６は、出力設定前の用紙８１と、ウォータマーク等のスタンプを付加する出力設定が行われている場合の出力設定後の用紙８２を示している。出力設定後の用紙８２では、出力設定前の用紙８１にスタンプに対応する出力イメージ画像８３が重畳されている。これによりヘッドマウントディスプレイ装置３０の装着者は、出力設定前の用紙８１に既に印字されている内容（文字や画像）と出力設定に従って付加されるスタンプとの位置関係や濃度の関係をヘッドマウントディスプレイ装置３０にＡＲ表示された出力設定後の用紙８２を見て事前（印刷前）に確認することができる。
【００８７】
図７は、出力設定前の用紙８５と、中折りの出力設定が行われている場合の出力設定後の用紙８６を示している。出力設定後の用紙８６では、出力設定前の用紙８５に、中折りの折れ目に対応する出力イメージ画像８７が重畳されている。これによりヘッドマウントディスプレイ装置３０の装着者は、出力設定前の用紙８５に既に印字されている内容（文字や画像）と出力設定に従って施される中折りの折れ目との位置関係をヘッドマウントディスプレイ装置３０にＡＲ表示された出力設定後の用紙８６を見て事前に確認することができる。
【００８８】
ここでは、出力設定前の用紙８５の中で既に文字や画像が存在する領域（既存印字領域とする）に、出力設定に従って中折りを行った場合の折り目が重なるか否かを判定し、重なる場合と、重ならない場合とで、出力イメージ画像８７として表示する折り目の表示形態（たとえば、色）を相違させるようになっている。また、出力設定に従って中折りを行った場合の折り目の位置が既存印字領域と重なっている場合は、該付加処理に関する設定をユーザから受けた外部装置に対して、該付加処理に関する設定内容の変更操作をユーザから受けるように指示する。具体的には、上記の例では、折りに関する出力設定の設定画面を表示する指示を画像形成装置１０に対して送信する。この指示を受信した画像形成装置１０は、折りに関する出力設定をユーザから受けるための設定画面を操作パネルに表示する。
【００８９】
既存印字領域と付加処理の処理結果とが重なる場合と重ならない場合とで表示形態を相違させたり、重なる場合に該当する出力設定に関する設定画面の表示指示を画像形成装置１０へ送信したりする動作は、以下に示す他の付加処理（ただし、地紋のように重なることが前提の付加処理は除く）についても同様に行われる。
【００９０】
図８は、出力設定前の用紙８５と、三つ折りの出力設定が行われている場合の出力設定後の用紙８８を示している。出力設定後の用紙８８では、出力設定前の用紙８５に、三つ折りの折れ目に対応する出力イメージ画像８９が重畳されている。これによりヘッドマウントディスプレイ装置３０の装着者は、出力設定前の用紙８５に既に印字されている内容（文字や画像）と出力設定に従って施される三つ折りの折れ目との位置関係をヘッドマウントディスプレイ装置３０にＡＲ表示された出力設定後の用紙８８を見て事前に確認することができる。
【００９１】
図９は、出力設定前の用紙８５と、四つ折りの出力設定が行われている場合の出力設定後の用紙９０を示している。出力設定後の用紙９０では、出力設定前の用紙８５に、四つ折りの折れ目に対応する出力イメージ画像９１が重畳されている。これによりヘッドマウントディスプレイ装置３０の装着者は、出力設定前の用紙８５に既に印字されている内容（文字や画像）と出力設定に従って施される四つ折りの折れ目との位置関係をヘッドマウントディスプレイ装置３０にＡＲ表示された出力設定後の用紙９０を見て事前に確認することができる。
【００９２】
図１０は、出力設定前の用紙８５と、Ｚ折りの出力設定が行われている場合の出力設定後の用紙９２を示している。出力設定後の用紙９２では、出力設定前の用紙８５に、Ｚ折りの折れ目に対応する出力イメージ画像９３が重畳されている。これによりヘッドマウントディスプレイ装置３０の装着者は、出力設定前の用紙８５に既に印字されている内容（文字や画像）と出力設定に従って施されるＺ折りの折れ目との位置関係をヘッドマウントディスプレイ装置３０にＡＲ表示された出力設定後の用紙９２を見て事前に確認することができる。
【００９３】
図１１は、コピー機能において画像読取部２３で読み取られる原稿用紙（出力設定前の用紙）９５と、画像欠け範囲の出力設定が成されている場合の出力設定後の用紙９６を示している。画像欠け範囲に係る出力イメージ画像９７は、用紙の周縁の画像欠け範囲とその内側の領域との境界を示す境界線９７ａと、出力設定前の用紙（画像読取部２３で読み取られる原稿用紙）９５において画像欠け範囲にあった文字や画像をその表示形態（ここでは、色）を異ならせて示した警告画像９７ｂとから構成される。図では警告画像９７ｂとなっている文字を破線で囲ってある。
【００９４】
上記のような出力イメージ画像９７が重畳された出力設定後の用紙９６がヘッドマウントディスプレイ装置３０にＡＲ表示されるので、ヘッドマウントディスプレイ装置３０の装着者は、コピーにより画像が欠ける範囲を原稿用紙上で事前に確認することができる。
【００９５】
図１２は、コピー機能において画像読取部２３で読み取られる原稿用紙（出力設定前の用紙）９５と、画像欠け範囲の出力設定が成されている場合の出力設定後の用紙９８の他の例を示している。画像欠け範囲に係る出力イメージ画像９９は、図１１と同様の境界線９７ａと警告画像９７ｂに、画像欠け範囲を数値で示した画像欠け範囲情報９９ｃを加えたものである。
【００９６】
図１３は、コピー機能において画像読取部２３で読み取られる原稿用紙（出力設定前の用紙）９５と、画像欠け範囲の出力設定が成されている場合の出力設定後の用紙１００の他の例を示している。画像欠け範囲に係る出力イメージ画像１０１は、印刷推奨領域（たとえば、原稿の周縁から１０ミリ以上内側の領域）の外周を示す第１の境界線１０１ａと、印刷可能領域（画像が欠損しない最大範囲、たとえば、原稿の周縁から５ミリ以上内側の領域）の外周を示す第２の境界線１０１ｂと、図１１と同様の警告画像９７ｂとから構成される。なお、第１の境界線１０１ａと第２の境界線１０１ｂの双方を表示させてもよいし、別々に表示させてもよい。
【００９７】
図１４は、出力設定前の用紙１０３と、地紋画像を付加する出力設定が行われている場合の出力設定後の用紙１０４を示している。地紋画像を付加する出力設定では、地紋のパターンと、埋め込む文字や画像およびその埋め込み位置などが設定される。出力設定後の用紙１０４では、出力設定前の用紙１０３に、地紋画像に対応する出力イメージ画像１０５（図中、グレーの背景）が重畳されている。これにより、ヘッドマウントディスプレイ装置３０の装着者は、出力設定前の用紙１０３に既に印字されている内容（文字や画像）と出力設定に従って施される地紋画像とのコントラストなどをヘッドマウントディスプレイ装置３０にＡＲ表示された出力設定後の用紙１０４を見て事前に確認することができる。
【００９８】
図１５は、出力設定前の用紙１０３と、出力設定前の用紙１０３に地紋画像を付加した出力物をさらにスキャナで読み取ってコピーした場合に得られる出力物に対応する出力設定後の用紙１０６を示している。出力設定後の用紙１０６における出力イメージ画像１０７は、潜像の部分（地紋が像に埋め込まれていた文字や画像）が白抜きとなって顕在化された地紋の画像である。図１５は地紋画像に埋め込んだ文字が「不正コピーです」であった場合の例を示している。
【００９９】
出力設定後の用紙１０６では、地紋画像に潜像として埋め込まれていた文字や画像が顕像となって表示されるので、ヘッドマウントディスプレイ装置３０の装着者は、出力設定前の用紙１０３に既に印字されている内容（文字や画像）と地紋画像に埋め込まれている潜像との位置関係や濃度（スキャン前の濃度とスキャン後の濃度）をヘッドマウントディスプレイ装置３０にＡＲ表示された出力設定後の用紙１０６を見て事前に確認することができる。
【０１００】
図１６は、出力設定前の用紙１１０と、センター消去の出力設定が行われている場合の出力設定後の用紙１１１を示している。出力設定後の用紙１１１では、出力設定前の用紙１１０に、その中央部分の影Ｓを消去（用紙の地の色や白でマスク）する出力イメージ画像１１２が重畳されている。なお、図では中央部分を白でマスクしており、該白でマスクする出力イメージ画像１１２を見やすくするために、出力設定後の用紙１１１の地の色をグレーで示してある。
【０１０１】
ヘッドマウントディスプレイ装置３０の装着者は、出力設定前の用紙１１０にセンター消去処理が施された場合の出力結果をヘッドマウントディスプレイ装置３０にＡＲ表示された出力設定後の用紙１１１を見て事前に確認することができる。たとえば、センター消去処理により原稿の中央付近の文字が欠けるか否かを確認することができる。
【０１０２】
図１７は、出力設定前の用紙１１３と、枠消し処理の出力設定が行われている場合の出力設定後の用紙１１４を示している。出力設定後の用紙１１４では、たとえば、原稿の周囲を白でマスクして消去する出力イメージ画像１１５が重畳されている。なお、図では白でマスクする出力イメージ画像１１５を見やすくするために背景をグレーで示してある。ヘッドマウントディスプレイ装置３０の装着者は、出力設定前の用紙１１３に対して枠消し処理が施された場合の出力結果をヘッドマウントディスプレイ装置３０にＡＲ表示された出力設定後の用紙１１４を見て事前に確認することができる。たとえば、枠消し処理により原稿の端部の文字が欠けるか否かを確認することができる。
【０１０３】
図１８は、出力設定前の用紙１１７と、ステイプルを打つ出力設定が行われている場合の出力設定後の用紙１１８を示している。出力設定後の用紙１１８では、出力設定前の用紙１１７の左上角の近傍にステイプルに対応する出力イメージ画像１１９が重畳されている。これにより、ヘッドマウントディスプレイ装置３０の装着者は、出力設定前の用紙１１７に既に印字されている内容（文字や画像）と出力設定に従って打つステイプルとの位置関係をヘッドマウントディスプレイ装置３０にＡＲ表示された出力設定後の用紙１１８を見て事前に確認することができる。
【０１０４】
図１９は、出力設定前の用紙１１７と、パンチ穴を開ける出力設定が行われている場合の出力設定後の用紙１２１を示している。出力設定後の用紙１２１では、出力設定前の用紙１１７の左端の２箇所にパンチ穴に対応する出力イメージ画像１２２が重畳されている。これにより、ヘッドマウントディスプレイ装置３０の装着者は、出力設定前の用紙１１７に既に印字されている内容（文字や画像）と出力設定に従って開けるパンチ穴との位置関係をヘッドマウントディスプレイ装置３０にＡＲ表示された出力設定後の用紙１２１を見て事前に確認することができる。
【０１０５】
図１９の例では、第１のパンチ穴に対応する出力イメージ画像１２２ａは既存印字領域と重なっており、第２のパンチ穴に対応する出力イメージ画像１２２ｂは既存印字領域と重なっていない。そこで、第１のパンチ穴に対応する出力イメージ画像１２２ａは赤色で表示し、第２のパンチ穴に対応する出力イメージ画像１２２ｂは青色で表示して、これらの表示形態を相違させてある。
【０１０６】
次に、ＡＲ表示装置としてのヘッドマウントディスプレイ装置３０が行う処理を流れ図に沿って説明する。なお、ＡＲ表示装置である携帯端末６０についても同様の動作となるのでその説明は省略する。
【０１０７】
図２０、図２１は、ヘッドマウントディスプレイ装置３０が行う処理の全体を示す流れ図である。ヘッドマウントディスプレイ装置３０は、外部装置（たとえば、画像形成装置１０）から画像形成装置１０に対する出力設定の内容を示す出力設定情報を受信する（ステップＳ００１）。なお、画像形成装置１０に対して実際に設定されている出力設定のほか、これから設定する予定の出力設定に係る出力設定情報を携帯端末等から受信してもよい。
【０１０８】
出力設定情報を受信したら（ステップＳ００１；Ｙｅｓ）、カメラ部４７が撮像している現実空間から、出力設定に対応する用紙を検出する処理を開始する（ステップＳ００２）。具体的には、カメラ部４７の出力映像を解析して用紙を検出すると共に、検出された用紙までの距離を距離センサ５４で計測する。
【０１０９】
ユーザから用紙検出を中止する指示を受けた場合は（ステップＳ００３；Ｙｅｓ）、カメラ部４７による撮像および用紙検出を中止して（ステップＳ００４）、本処理を終了する。
【０１１０】
ユーザから用紙検出を中止する指示を受けなければ（ステップＳ００３；Ｎｏ）、用紙検出により、所定の距離内に用紙を検出できたか否かを判断する（ステップＳ００５）。なお、ここでは、用紙までの距離と映像内の用紙の大きさとから、その用紙の現実のサイズを求め、このサイズと、予め不揮発メモリ４４などに記憶してある管理テーブル（図２２参照）に登録されている規定の用紙サイズとを比較して、該用紙のサイズを特定する。そして、この特定した用紙のサイズと出力設定情報が対象としている用紙のサイズとが一致した場合に、出力設定情報に対応する用紙を検出したと判定するようになっている。
【０１１１】
未検出であれば（ステップＳ００５；Ｎｏ）、「現在の撮影範囲では、用紙を検出できないので、用紙を検出できるように、カメラ部４７の近くに用紙を近づけてください」といったメッセージを表示部３１に表示する（ステップＳ００６）、そして、ステップＳ００２に戻って処理を継続する。
【０１１２】
用紙を検出できた場合は（ステップＳ００５；Ｙｅｓ）、ステップＳ００１で受信した出力設定情報が示す出力設定に従って付加処理を実施した場合の処理結果を模擬的に示した出力イメージ画像を作成する（ステップＳ００７）。
【０１１３】
次に、検出した用紙の位置および姿勢（カメラ部４７から見た向きや三次元形状）を解析する（ステップＳ００８）。そして、ステップＳ００８の解析結果が示す用紙の位置や姿勢に適合するように出力イメージ画像を補正する（ステップＳ００９）。
【０１１４】
次に、ステップＳ００９またはステップＳ０１８で補正した出力イメージ画像を、ステップＳ００５で検出した用紙に重ね合わせてＡＲ表示する（ステップＳ０１０）。これにより、ヘッドマウントディスプレイ装置３０の装着者には、用紙上に出力イメージ画像が重ねあわされた拡張現実空間が見える。
【０１１５】
ユーザから、上記のＡＲ表示をキャンセルする指示を受けた場合は（ステップＳ０１１；Ｙｅｓ）、表示部３１の表示をクリアして（ステップＳ０１２）、本処理を終了する。
【０１１６】
上記キャンセルの指示を受けない場合は（ステップＳ０１１；Ｎｏ）、用紙を撮像してから所定時間が経過したか否かを調べる（ステップＳ０１３）。所定時間はたとえば０．１秒などであり、任意に定めればよい。所定時間は用紙の動きに追従して出力イメージ画像を表示し得る時間が好ましく、０．２秒以下、より好ましくは０．１秒以下、処理速度が許せばさらに短時間とすることが望ましい。
【０１１７】
所定時間が経過したら（ステップＳ０１３；Ｙｅｓ）、カメラ部４７が撮像している現実空間から用紙を検出する処理を再び行う（ステップＳ０１４）。そして、検出した用紙の位置および姿勢（カメラ部４７から見た向きや三次元形状）を解析し（ステップＳ０１５）、前回の解析結果が示す用紙の位置および姿勢と今回の解析結果が示す用紙の位置および姿勢を比較する（ステップＳ０１６）。
【０１１８】
比較した結果、前回の解析結果が示す用紙の位置および姿勢と今回の解析結果が示す用紙の位置および姿勢が同一ならば（ステップＳ０１７；Ｙｅｓ）、ステップＳ０１０に戻って処理を継続する。
【０１１９】
比較した結果、前回の解析結果が示す用紙の位置および姿勢と今回の解析結果が示す用紙の位置および姿勢が相違する場合は（ステップＳ０１７；Ｎｏ）、最新の解析結果（前回のステップＳ０１５での解析結果）が示す用紙の位置および姿勢に適合するように出力イメージ画像を補正し（ステップＳ０１８）、ステップＳ０１０に戻って処理を継続する。
【０１２０】
これにより、ユーザが用紙を手で持っていて、用紙が移動したり変形したりする場合でも、用紙の該移動や変形に追従して、出力イメージ画像が用紙上に重ねて表示される。
【０１２１】
図２３は、図２０のステップＳ００７の詳細を示している。ヘッドマウントディスプレイ装置３０のＣＰＵ４１は、カメラ部４７の出力画像内の用紙を解析して、該用紙上の既存印字領域を判別する（ステップＳ０２１）。ステップＳ００１で外部装置から受信した出力設定情報に基づいて、この出力設定情報が示す出力設定に従って付加処理を実施した場合の処理結果の用紙上の位置を算出する（ステップＳ０２２）。たとえば、パンチ穴を開ける出力設定が成されている場合、そのパンチ穴の用紙上の位置を算出する。
【０１２２】
次に、出力設定情報が示す出力設定が示す各付加処理をステップＳ０２２で算出した位置に施した場合の処理結果を示す出力イメージ画像を作成する（ステップＳ０２３）。
【０１２３】
次に、用紙内の既存印字領域の位置と、ステップＳ０２２で算出した付加処理を施す位置とを比較し（ステップＳ０２４）、既存印字領域に付加処理の位置が重なるか否かを判定する（ステップＳ０２５）。既存印字領域に付加処理の位置が重なる場合は（ステップＳ０２５；Ｙｅｓ）、重なっている旨の警告を行う（ステップＳ０２６）。さらに、既存印字領域に付加処理の位置が重なっている箇所と重なっていない箇所とで出力イメージ画像の表示形態を相違させて（ステップＳ０２７）本処理を終了する。たとえば、色を相違させたり、一方に網がけを施したりする。
【０１２４】
既存印字領域に付加処理の位置が重なっていない場合は（ステップＳ０２５；Ｎｏ）、ステップＳ０２３で作成した出力イメージ画像を最終的な出力イメージ画像として本処理を終了する。
【０１２５】
図２４は、図２３のステップＳ０２６の詳細を示している。視線検出部５３によりユーザ（装着者）の視線の動向を確認する（ステップＳ０３１）。そして、ユーザの視線が用紙に向いているか否か（ユーザが用紙を見ているか否か）を判定する（ステップＳ０３２）。ユーザが用紙を見ていない場合は（ステップＳ０３２；Ｎｏ）、既存印字領域に付加処理の位置が重なっている旨の警告メッセージを音声出力部５５から音声で出力して警告を行い（ステップＳ０３３）、ステップＳ０３６へ移行する。
【０１２６】
ユーザが用紙を見ている場合は（ステップＳ０３２；Ｙｅｓ）、既存印字領域と付加処理の位置が重なっている箇所を抽出し（ステップＳ０３４）、その箇所またはその近傍に、既存印字領域に付加処理の位置が重なっている旨のメッセージ等を警告表示し（ステップＳ０３５）、ステップＳ０３６へ移行する。
【０１２７】
ステップＳ０３６では、既存印字領域に処理位置が重なっている付加処理（出力設定の設定項目）を特定する。そして、外部装置（たとえば画像形成装置１０）の現在の表示画面を、ステップＳ０３６で特定した設定項目の設定画面に切り替える指示を該外部装置に送信して（ステップＳ０３７）、本処理を終了する。
【０１２８】
図２５は、図２４のステップＳ０３７でヘッドマウントディスプレイ装置３０から送信された指示を受信した外部装置（画像形成装置１０など）が行う処理の流れを示している。
【０１２９】
画像形成装置１０などの外部装置は、ヘッドマウントディスプレイ装置３０から上記の切り替える指示が送られてくるのを待機している（ステップＳ０４１；Ｎｏ）。そして、切り替える指示を受信すると（ステップＳ０４１；Ｙｅｓ）、その受信した指示の内容に対応した設定画面に、自装置の操作パネル等に表示する画面を切り替えて（ステップＳ０４２）処理を終了する。その後は、切り換え後の設定画面にて出力設定の再設定や変更を受け付ける。
【０１３０】
このように、本実施の形態に係るＡＲ表示装置（ヘッドマウントディスプレイ装置３０や携帯端末６０）では、画像形成装置１０に対する出力設定の内容を示す出力設定情報を画像形成装置１０等から取得し、該出力設定情報が示す付加処理を画像形成装置１０で実施した場合の処理結果を模擬的に示す出力イメージ画像を作成し、これを現実空間の用紙に重ね合わせた拡張現実空間を表示する。これにより、ユーザは、出力設定に対応した処理結果を、実際の印刷を行うことなく、事前に確認することができる。
【０１３１】
また、現実空間の用紙に出力イメージ画像を重ねたＡＲ表示によって出力設定に対応する処理結果を確認できるので、たとえば、原稿をスキャナで読み取るなどの手間が不要となり、ユーザは出力設定に対応する処理結果の確認を迅速かつ容易に行うことができる。
【０１３２】
また、ユーザが用紙を動かしても、拡張現実空間内の出力イメージ画像が用紙の動きに追従して変化するので、用紙を固定する必要がない。また、用紙を意図的に動かして、仕上がり状態を各種の方向から確認することもできる。
【０１３３】
さらに、現実の用紙に出力イメージ画像を重畳した拡張現実空間を表示するので、現実の用紙に既に印刷されている文字や画像と出力設定に対応する付加処理の処理結果との位置関係や重なり具合などを確認することができる。
【０１３４】
また、用紙に既に印刷されている文字や画像（既存印字領域）と出力設定に対応する付加処理の処理結果とが重なる箇所と重ならない箇所とを異なる表示形態の出力イメージ画像で表示するので、ユーザは既存印字領域に処理結果が重なるか否かを容易に確認することができる。
【０１３５】
さらに、ヘッドマウントディスプレイ装置３０や携帯端末６０は、処理結果が用紙の既存印字領域に重なる付加処理については、その設定を変更するための設定画面を表示するように画像形成装置１０などの外部装置に指示するので、ユーザは問題のある設定を容易に変更することができる。
【０１３６】
なお、上記の例では、ヘッドマウントディスプレイ装置３０や携帯端末６０が出力イメージ画像の作成、補正および用紙に合わせて重ね合わせる処理などすべての処理を行う例を示したが、出力イメージ画像の作成、補正、用紙に合わせるための表示位置の決定などの処理をヘッドマウントディスプレイ装置３０や携帯端末６０とは別のＡＲ表示制御装置１３０（図１参照）で行い、該ＡＲ表示制御装置１３０からの指示に従ってヘッドマウントディスプレイ装置３０や携帯端末６０が出力イメージ画像に基づく拡張現実空間を表示するように構成されてもよい。
【０１３７】
図２６は、ＡＲ表示制御装置１３０の概略構成を示すブロック図である。ＡＲ表示制御装置１３０は、当該ＡＲ表示制御装置１３０の動作を統括的に制御するＣＰＵ１３１を備え、該ＣＰＵ１３１にはバスを通じてＲＯＭ１３２、ＲＡＭ１３３、不揮発メモリ１３４、ハードディスク装置１３５、操作表示装置１３６、画像処理部１３７、通信部１３８、認証部１３９などが接続されている。ＣＰＵ１３１がＲＯＭ１３２に格納されているプログラムを実行することでＡＲ表示制御装置１３０としての機能が実現される。
【０１３８】
ＡＲ表示制御装置１３０は、画像形成装置１０などから通信部１３８を通じて出力設定情報を取得する。また、ヘッドマウントディスプレイ装置３０や携帯端末６０などのＡＲ表示装置からカメラの撮影映像や距離センサで検出した距離情報などを取得し、これらに基づいて、ＡＲ表示装置のカメラが撮影している現実空間に存在する用紙をその姿勢を含めて検出する。そして、画像形成装置１０などから取得した出力設定情報に従って画像形成装置１０等で付加処理を実施した場合の処理結果を模擬的に示す出力イメージ画像を作成し、これを現実空間に存在する用紙の姿勢に合わせて補正し、該補正した出力イメージ画像を現実空間に存在する用紙に重ね合わせた拡張現実空間をＡＲ表示装置に表示させる。たとえば、補正後の出力イメージ画像とその重畳位置を示す情報を作成してヘッドマウントディスプレイ装置３０に送信して、上記の拡張現実空間をヘッドマウントディスプレイ装置３０にＡＲ表示させる。
【０１３９】
ＡＲ表示制御装置１３０は、図１に示すような携帯端末として構成されるほか、ＰＣやサーバなどで構成されてもよい。
【０１４０】
以上、本発明の実施の形態を図面によって説明してきたが、具体的な構成は実施の形態に示したものに限られるものではなく、本発明の要旨を逸脱しない範囲における変更や追加があっても本発明に含まれる。
【０１４１】
実施の形態に示した付加処理は一例であり、画像形成装置１０が施す処理であって出力物にその処理結果が現れる処理であれば任意の処理でよい。
【０１４２】
実施の形態では、用紙の位置や姿勢をカメラ部４７の画像解析と距離センサ５４による各部までの距離の測定によって検出したが、検出方法はこれに限定されるものではない。
【０１４３】
また、本発明は、印刷装置を含まない印刷条件設定システムとして構成されてもよい。すなわち、外部の印刷装置が行う付加処理に関する出力設定を行う装置（たとえば、携帯端末）と、ＡＲ表示装置またはＡＲ表示制御装置とを含む印刷条件設定システムとして構成されてもよい。
【０１４４】
実施の形態で示した出力設定前の用紙はコピーされる原稿でもよいし、印刷データに基づいて印刷された出力物でもよい。コピー原稿の場合、ユーザは本実施の形態に係るヘッドマウントディスプレイ装置３０や携帯端末６０を使用して、コピーする前に出力設定に対応した仕上がり状態をＡＲ表示で確認することができる。印刷データの場合には、次にその印刷データによる印刷に、出力設定に対応する付加処理を施した場合の処理結果をＡＲ表示で確認することができる。
【０１４５】
既存印字領域と付加処理の処理結果が重なる箇所と重ならない箇所とで出力イメージ画像の表示形態を異ならせる方法は色を相違させることに限定されず、たとえば、形状、太さ、大きさなど任意の属性を相違させてもよい。
【０１４６】
実施の形態では、外の様子にハーフミラー３５で画像を重ね合わせる方式のヘッドマウントディスプレイ装置３０を例示したが、装着すると外の様子を見ることができず、映し出される画像のみが見える、ＶＲ（Virtual Reality）型のヘッドマウントディスプレイであってもよい。この場合は携帯端末６０と同様にカメラ画像に出力イメージ画像を合成した画像を表示すればよい。
【符号の説明】
【０１４７】
２…ネットワーク
３…印刷システム
１０…画像形成装置
１１…ＣＰＵ
１２…ＲＯＭ
１３…ＲＡＭ
１４…不揮発メモリ
１５…ハードディスク装置
１６…自動原稿搬送部
１７…認証部
２０…操作部
２１…表示部
２２…ネットワーク通信部
２３…画像読取部
２４…画像処理部
２５…プリンタ部
２６…ファクシミリ通信部
３０…ヘッドマウントディスプレイ装置
３１…表示部
３２…ブリッジ
３３…ツル
３４…基幹部
３５…ハーフミラー
４１…ＣＰＵ
４２…ＲＯＭ
４３…ＲＡＭ
４４…不揮発メモリ
４５…方位センサー部
４６…投影部
４７…カメラ部
４８…操作部
５１…ネットワーク通信部
５２…画像処理部
５３…視線検出部
５４…距離センサ
５５…音声出力部
６０…携帯端末
６１…ＣＰＵ
６２…ＲＯＭ
６３…ＲＡＭ
６４…不揮発メモリ
６５…方位センサー部
６６…カメラ部
６７…認証部
６８…操作部
６９…表示部
７０…ネットワーク通信部
７１…画像処理部
７２…視線検出部
７３…距離センサ
７４…音声出力部
８１…出力設定前の用紙
８２…スタンプに係る出力設定後の用紙
８３…スタンプに対応する出力イメージ画像
８５…出力設定前の用紙
８６…中折りに係る出力設定後の用紙
８７…中折りの折れ目に対応する出力イメージ画像
８８…三つ折りに係る出力設定後の用紙
８９…三つ折りの折れ目に対応する出力イメージ画像
９０…四つ折りに係る出力設定後の用紙
９１…四つ折りの折れ目に対応する出力イメージ画像
９２…Ｚ折りに係る出力設定後の用紙
９３…Ｚ折りの折れ目に対応する出力イメージ画像
９５…出力設定前の用紙
９６…画像欠け範囲に係る出力設定後の用紙
９７…画像欠け範囲に対応する出力イメージ画像
９７ａ…境界線
９７ｂ…警告画像
９８…画像欠け範囲に係る出力設定後の用紙
９９…画像欠け範囲に対応する出力イメージ画像
９９ｃ…画像欠け範囲情報
１００…画像欠け範囲に係る出力設定後の用紙
１０１…画像欠け範囲に係る出力イメージ画像
１０１ａ…第１の境界線
１０１ｂ…第２の境界線
１０３…出力設定前の用紙
１０４…地紋画像に係る出力設定後の用紙
１０５…地紋画像に対応する出力イメージ画像
１０６…コピー後の地紋画像に係る出力設定後の用紙
１０７…地紋画像の潜像を顕在化して示す出力イメージ画像
１１０…出力設定前の用紙
１１１…センター消去に係る出力設定後の用紙
１１２…センター消去に係る出力イメージ画像
１１３…出力設定前の用紙
１１４…枠消し処理に係る出力設定後の用紙
１１５…枠消し処理に係る出力イメージ画像
１１７…出力設定前の用紙
１１８…ステイプルに係る出力設定後の用紙
１１９…ステイプルに対応する出力イメージ画像
１２１…パンチ穴に係る出力設定後の用紙
１２２…パンチ穴に対応する出力イメージ画像
１２２ａ…赤色でパンチ穴を示す出力イメージ画像
１２２ｂ…青色でパンチ穴を示す出力イメージ画像
Ｌ１…外光
Ｌ２…画像光
Ｓ…中央部分の影
【図２】
0005884811.tif 000002
【図４】
0005884811.tif 000003
【図５】
0005884811.tif 000004
【図２０】
0005884811.tif 000005
【図２１】
0005884811.tif 000006
【図２２】
0005884811.tif 000007
【図２３】
0005884811.tif 000008
【図２４】
0005884811.tif 000009
【図２５】
0005884811.tif 000010
【図２６】
0005884811.tif 000011
【図１】
0005884811.tif 000012
【図３】
0005884811.tif 000013
【図６】
0005884811.tif 000014
【図７】
0005884811.tif 000015
【図８】
0005884811.tif 000016
【図９】
0005884811.tif 000017
【図１０】
0005884811.tif 000018
【図１１】
0005884811.tif 000019
【図１２】
0005884811.tif 000020
【図１３】
0005884811.tif 000021
【図１４】
0005884811.tif 000022
【図１５】
0005884811.tif 000023
【図１６】
0005884811.tif 000024
【図１７】
0005884811.tif 000025
【図１８】
0005884811.tif 000026
【図１９】
0005884811.tif 000027