(57)【要約】【課題】画像形成装置に対して行う作業の内容をユーザに容易に把握させ、作業効率を向上させる。【解決手段】画像形成装置２は、画像形成装置２の状態に関する状態情報を取得する状態情報取得部３８３と、複数のパターンのマーカを表示可能なマーカ表示部３５と、状態情報取得部３８３で取得した状態情報に応じたパターンのマーカをマーカ表示部３５に表示するよう制御するマーカ表示制御部３８４と、撮影装置３で撮影された映像からマーカ表示部３５に表示されているマーカを検出するマーカ検出部３８５と、マーカ検出部３８５で検出したマーカのパターンに対応した、画像形成装置２に対してユーザが行うべき作業に関する電子情報を、撮影装置３で撮影された映像に重畳する重畳部３８６とを備え、表示装置４は、画像形成装置２の重畳部３８６で電子情報が重畳された映像を表示する表示部４３を備える。【選択図】図３
2011245792.tif 000002
【特許請求の範囲】
【請求項１】
画像形成装置と、前記画像形成装置を撮影する撮影装置と、前記撮影装置で撮影された映像を表示する表示装置とを備える画像形成システムであって、
前記画像形成装置の状態に関する状態情報を取得する状態情報取得部と、
前記画像形成装置に設けられ、複数のパターンのマーカを表示可能なマーカ表示部と、
前記状態情報取得部で取得した前記状態情報に応じたパターンのマーカを前記マーカ表示部に表示するよう制御するマーカ表示制御部と、
前記撮影装置で撮影された映像から前記マーカ表示部に表示されているマーカを検出するマーカ検出部と、
前記マーカ検出部で検出したマーカのパターンに対応した、前記画像形成装置に対してユーザが行うべき作業に関する電子情報を、前記撮影装置で撮影された映像に重畳する重畳部と、
前記表示装置に設けられ、前記重畳部で前記電子情報が重畳された映像を表示する表示部と
を備えることを特徴とする画像形成システム。
【請求項２】
前記重畳部は、前記マーカ表示部に表示されているマーカのパターンに応じた前記状態情報が示す状態の前記画像形成装置に対してユーザが行うべき作業の手順の各段階に対応する各電子情報を、前記撮影装置で撮影された映像に順次切り替えて重畳することを特徴とする請求項１に記載の画像形成システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像形成装置を備える画像形成システムに関する。
【背景技術】
【０００２】
複写機、プリンタ装置、あるいはそれらの複合機等の画像形成装置において、用紙ジャム等のエラーが発生した場合、エラーが発生した旨やその解除手順等を、操作パネルに備えられたタッチパネル等の画面に表示している（例えば、特許文献１参照）。ユーザは、画面の表示を見て手順を確認しながら、エラー解除の作業を行う。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平９−３３１４１６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上述したような従来の画像形成装置では、エラーの発生位置やその解除手順が、画面上で簡易な図を用いて表現されることが多い。このため、例えば用紙ジャムが発生した場合に、その発生位置が大まかにしか表現されず、ユーザにとって把握しにくいことがあった。
【０００５】
また、ユーザは、画面に表示された図と実際の装置とを見比べながらエラー解除の作業を行うが、図の表現と実際の装置の構造等とを整合させることがユーザにとって簡単でない場合があり、作業効率の低下を招くことがあった。
【０００６】
そこで、画像形成装置に対して行うべきエラー解除等の作業の内容を、より容易にユーザに把握させることができ、作業効率を向上させることができるような技術が要望されていた。
【０００７】
本発明は上記に鑑みてなされたもので、画像形成装置に対して行う作業の内容をユーザに容易に把握させ、作業効率を向上させることができる画像形成システムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するため、本発明に係る画像形成システムの第１の特徴は、画像形成装置と、前記画像形成装置を撮影する撮影装置と、前記撮影装置で撮影された映像を表示する表示装置とを備える画像形成システムであって、前記画像形成装置の状態に関する状態情報を取得する状態情報取得部と、前記画像形成装置に設けられ、複数のパターンのマーカを表示可能なマーカ表示部と、前記状態情報取得部で取得した前記状態情報に応じたパターンのマーカを前記マーカ表示部に表示するよう制御するマーカ表示制御部と、前記撮影装置で撮影された映像から前記マーカ表示部に表示されているマーカを検出するマーカ検出部と、前記マーカ検出部で検出したマーカのパターンに対応した、前記画像形成装置に対してユーザが行うべき作業に関する電子情報を、前記撮影装置で撮影された映像に重畳する重畳部と、前記表示装置に設けられ、前記重畳部で前記電子情報が重畳された映像を表示する表示部とを備えることにある。
【０００９】
本発明に係る画像形成システムの第２の特徴は、前記重畳部は、前記マーカ表示部に表示されているマーカのパターンに応じた前記状態情報が示す状態の前記画像形成装置に対してユーザが行うべき作業の手順の各段階に対応する各電子情報を、前記撮影装置で撮影された映像に順次切り替えて重畳することにある。
【発明の効果】
【００１０】
本発明に係る画像形成システムの第１の特徴によれば、画像形成装置の状態に応じたパターンのマーカをマーカ表示部に表示し、撮影装置で画像形成装置を撮影した映像からマーカを検出し、マーカのパターンに対応した、画像形成装置に対してユーザが行うべき作業に関する電子情報を撮影装置で撮影した映像に重畳することで、画像形成装置の状態に応じてユーザが行うべき作業の内容を映像に表示し、ユーザに作業の内容を容易に把握させ、作業効率を向上させることができる。
【００１１】
本発明に係る画像形成システムの第２の特徴によれば、表示されているマーカのパターンに応じた状態情報が示す状態の画像形成装置に対してユーザが行うべき作業の手順の各段階に対応する各電子情報を、撮影装置で撮影された映像に順次切り替えて重畳することで、現在の状態の画像形成装置に対して行うべき作業の手順の各段階をユーザに予め確認させることができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の実施の形態に係る画像形成システムの概略構成を示す外観図である。
【図２】図１に示す画像形成システムの画像形成装置の概略構成図である。
【図３】図１に示す画像形成システムの機能構成を示すブロック図である。
【図４】電子情報が重畳された映像の一例を示す図である。
【図５】電子情報が重畳された映像の他の例を示す図である。
【図６】電子情報が重畳された映像の他の例を示す図である。
【図７】本発明の実施の形態の変形例に係る画像形成システムの機能構成を示すブロック図である。
【発明を実施するための形態】
【００１３】
以下、本発明の実施の形態について、図面を参照して説明する。なお、各図面を通じて同一もしくは同等の部位や構成要素には、同一もしくは同等の符号を付し、その説明を省略もしくは簡略化する。
【００１４】
図１は、本発明の実施の形態に係る画像形成システムの概略構成を示す外観図である。図１に示すように本実施の形態に係る画像形成システム１は、画像形成装置２と、画像形成装置２を撮影する撮影装置３と、撮影装置３で撮影された映像を表示する表示装置４とを備える。撮影装置３および表示装置４は、画像形成装置２と有線接続または無線接続される。
【００１５】
図１に示すように、本実施の形態では、表示装置４は、ユーザの頭部に装着可能なヘッドマウントディスプレイ（ＨＭＤ）からなり、撮影装置３は、ＨＭＤに設置された小型のカメラからなる。このような構成により、ユーザの通常の視界と同様の映像がディスプレイに表示される。表示装置４として透過型のＨＭＤを用いれば、ユーザはディスプレイ越しに現実環境も視認でき好適である。
【００１６】
なお、撮影装置３および表示装置４は、図１に示した構成に限らず、撮影装置３が画像形成装置２を撮影し、表示装置４が撮影装置３で撮影された画像を表示するものであればどのようなものでもよい。
【００１７】
図２は、画像形成装置２の概略構成図である。図２に示すように、画像形成装置２は、給紙部２１と、ベルト搬送部２２と、ヘッドユニット２３とを備える。
【００１８】
給紙部２１は、用紙が積載される給紙台２１１および給紙トレイ２１２ａ〜２１２ｃと、給紙台２１１および給紙トレイ２１２ａ〜２１２ｃのいずれかから給紙搬送路２４に沿って搬送されてきた用紙を所定のタイミングでベルト搬送部２２に送り出すレジストローラ２１３とを備える。
【００１９】
ベルト搬送部２２は、給紙部２１から繰り出された用紙を、周回する環状の搬送ベルトによりヘッドユニット２３側に向けて搬送する。
【００２０】
ヘッドユニット２３は、複数のインクジェットヘッドを有し、ベルト搬送部２２により印字搬送路２５に沿って搬送される用紙にインクを吐出して画像を印刷する。
【００２１】
ヘッドユニット２３により印刷された用紙は、ベルト搬送部２２等により搬送されてそのままフェイスアップ排紙台２６に排紙されるか、循環搬送路２７に導かれてフェイスダウン排紙台２８に排紙される。
【００２２】
両面印刷時には、片面印刷済みの用紙が循環搬送路２７を搬送され、スイッチバック経路２９に導かれてスイッチバックが行われ、印刷面を下向きにした状態でレジストローラ２１３によりベルト搬送部２２に送り出される。そして、片面印刷済みの用紙は、ベルト搬送部２２により印字搬送路２５を搬送されながらヘッドユニット２３により未印刷面に印刷された後、フェイスアップ排紙台２６またはフェイスダウン排紙台２８に排紙される。
【００２３】
上記の給紙搬送路２４、印字搬送路２５、循環搬送路２７、スイッチバック経路２９を含む、画像形成装置２において用紙が搬送される搬送経路上には、複数の用紙センサ３０ａ，３０ｂ，…が配置され、これらの検出出力を用いて、搬送経路における用紙ジャムを検出できるようになっている。すなわち、各用紙センサ３０ａ，３０ｂ，…は、用紙の有無または用紙の先端を検出するセンサであり、各用紙センサ３０ａ，３０ｂ，…において、所定のタイミングで検出されるはずの用紙が検出されない、検出されないはずのタイミングであるのに用紙が検出されている、などの異常が検出された場合に、用紙ジャムが発生したと判断できるようになっている。どの用紙センサで異常が検出されたかにより、用紙ジャムの発生位置も判断することができる。
【００２４】
図３は、画像形成システム１の機能構成を示すブロック図である。図３に示すように、画像形成装置２は、画像形成部３１と、搬送駆動部３２と、用紙検出部３３と、前カバーセンサ３４と、マーカ表示部３５と、記憶部３６と、映像取得部３７と、制御部３８と、出力部３９とを備える。
【００２５】
画像形成部３１は、ヘッドユニット２３を有し、ヘッドユニット２３の各インクジェットヘッドからインクを吐出して用紙に画像を印刷する。
【００２６】
搬送駆動部３２は、ベルト搬送部２２や給紙搬送路２４、印字搬送路２５等の搬送経路における駆動ローラを駆動して用紙の搬送を行う。
【００２７】
用紙検出部３３は、用紙センサ３０ａ，３０ｂ，…を有し、画像形成装置２の搬送経路上を搬送される用紙を検出する。
【００２８】
前カバーセンサ３４は、図１に示す画像形成装置２の前カバー２０の開閉を検出するセンサである。前カバー２０は、ユーザが用紙ジャムを取り除く作業を行う際などに開閉される。
【００２９】
マーカ表示部３５は、図１に示すように、画像形成装置２の前面に設けられ、液晶表示パネル、電子ペーパ等からなり、拡張現実感（ＡＲ：Augmented Reality）技術で用いられるマーカ４０を表示する。マーカ４０は、黒い矩形の枠と、この枠の内部に表示される文字、模様等からなるパターンとにより構成される。パターンによりマーカの種類が特定される。
【００３０】
ＡＲは、現実環境の撮影映像に電子情報を重畳することで現実環境の情報を拡張する技術である。本実施の形態の画像形成システム１では、映像に電子情報を重畳するための位置認識等の指標としてマーカ４０を用いる。
【００３１】
なお、マーカ表示部３５は、図１に示した位置に限らず、外部から視認されやすい位置であればどこに配置してもよい。
【００３２】
記憶部３６は、ハードディスク等の不揮発性の記憶媒体を備えて構成され、マーカ表示部３５に表示可能なマーカのパターンに対応して予め生成された電子情報を記憶している。本実施の形態において、この電子情報の内容は、画像形成装置２に対してユーザがエラー解除等を行うための作業内容に関する情報である。
【００３３】
電子情報としては、コンピュータグラフィックスにより作成された３次元（３Ｄ）モデル、実画像、アニメーション、文字情報等を用いることができる。
【００３４】
映像取得部３７は、撮影装置３で撮影された映像を取得する。
【００３５】
制御部３８は、ＣＰＵ、プログラム等を格納するメモリ、画像処理装置等を備えて構成され、ＣＰＵがプログラムに応じた処理を行うこと等で、画像形成制御部３８１、搬送制御部３８２、状態情報取得部３８３、マーカ表示制御部３８４、マーカ検出部３８５、重畳部３８６が構成される。
【００３６】
画像形成制御部３８１は、画像データに基づいて、ヘッドユニット２３の各インクジェットヘッドにおけるインク吐出動作を制御することにより、画像形成部３１における画像形成処理を制御する。
【００３７】
搬送制御部３８２は、搬送駆動部３２による用紙の搬送を制御する。
【００３８】
状態情報取得部３８３は、画像形成装置２の状態に関する状態情報として、用紙センサ３０ａ，３０ｂ，…の検出出力、前カバーセンサ３４の検出出力を取得する。これにより、状態情報取得部３８３は、画像形成装置２で用紙ジャムが発生した状態にあるか否かや、前カバー２０の開閉状態等を検出する。
【００３９】
マーカ表示制御部３８４は、状態情報取得部３８３で取得した状態情報に応じたパターンのマーカ４０をマーカ表示部３５に表示するよう制御する。
【００４０】
マーカ検出部３８５は、撮影装置３で撮影された映像上の、マーカ表示部３５に表示されているマーカの位置、向き、サイズを検出し、また、テンプレートマッチングの手法等を用いてマーカのパターンを検出する。
【００４１】
重畳部３８６は、マーカ検出部３８５で検出したマーカ４０のパターンに対応する電子情報を記憶部３６から取得し、この電子情報を撮影装置３で撮影された映像に重畳する。重畳部３８６は、マーカ検出部３８５で検出したマーカ４０の位置、向き、サイズに基づいて、ＡＲの技術により、映像に重畳する電子情報の位置、向き、サイズを決定する。
【００４２】
出力部３９は、重畳部３８６により電子情報が重畳された映像を、表示装置４に送出する。
【００４３】
表示装置４は、入力部４１と、表示制御部４２と、表示部４３とを備える。
【００４４】
入力部４１には、画像形成装置２から送られた映像が入力される。
【００４５】
表示制御部４２は、ＣＰＵ等を備えて構成され、画像形成装置２から送られた映像を表示部４３に表示するよう制御する。
【００４６】
表示部４３は、画像形成装置２から送られた映像を表示するディスプレイである。
【００４７】
次に、画像形成システム１の動作について説明する。画像形成装置２でエラーとして用紙ジャムが発生した場合を例に説明する。
【００４８】
印刷動作中は、搬送駆動部３２の駆動により搬送される用紙に、画像形成部３１により画像が印刷される。印刷された用紙はフェイスアップ排紙台２６またはフェイスダウン排紙台２８に搬送されて排紙される。
【００４９】
この印刷動作中に搬送経路上で用紙ジャムが発生すると、状態情報取得部３８３は、用紙センサ３０ａ，３０ｂ，…の検出出力から、用紙ジャムの発生、およびその発生位置を検出する。搬送制御部３８２は用紙の搬送を停止するよう搬送駆動部３２を制御し、画像形成制御部３８１はインク吐出を停止するよう画像形成部３１を制御する。
【００５０】
マーカ表示制御部３８４は、状態情報取得部３８３で検出した発生位置で用紙ジャムが発生している状態に応じたパターンのマーカをマーカ表示部３５に表示するよう制御する。
【００５１】
マーカがマーカ表示部３５に表示されると、ユーザ操作に応じて撮影装置３が画像形成装置２を撮影し、画像形成装置２の映像取得部３７は、撮影装置３で撮影された映像を取得する。
【００５２】
撮影装置３から映像を取得すると、マーカ検出部３８５は、映像上のマーカの位置、向き、サイズを検出するとともに、マーカのパターンを検出する。
【００５３】
次いで、重畳部３８６は、マーカ検出部３８５で検出したマーカのパターンに対応する電子情報を記憶部３６から取得し、この電子情報を撮影装置３から取得した映像に重畳する。この際、重畳部３８６は、マーカ検出部３８５で検出したマーカの位置、向き、サイズに基づいて、ＡＲの技術により、映像に重畳する電子情報の位置、向き、サイズを決定して、映像に整合するように重畳する。
【００５４】
そして、出力部３９は、重畳部３８６により電子情報が重畳された映像を、表示装置４に送出する。
【００５５】
表示装置４の表示制御部４２は、画像形成装置２から電子情報が重畳された映像が入力されると、その映像を表示部４３に表示するよう制御する。
【００５６】
電子情報が重畳された映像の一例を図４に示す。図４において、マーカ表示部３５には、「Ｅ−１２Ａ」というパターンのマーカが表示されている。このパターンが、本実施の形態において状態情報取得部３８３で検出した発生位置で用紙ジャムが発生している状態に対応するパターンとする。そして、この用紙ジャムを解消するためには、まず、ユーザは、前カバー２０を開ける作業を行う必要があるものとする。
【００５７】
この作業内容を示すために、図４に示す映像では、前カバー２０を開ける様子を表現する３Ｄモデル５０と、前カバー２０を開けることを指示する文字情報５１とが、電子情報として重畳されている。ユーザは図４の映像を、表示装置４のディスプレイを見て確認できる。
【００５８】
なお、ＡＲでは、撮影中に撮影装置３が移動することにより映像中のマーカの位置、向き、サイズが変動した場合、それに連動して、映像に重畳される電子情報の表示位置等も変動する。特に３Ｄモデルでは、マーカの向きに応じて３Ｄモデルのアングルが変動するので、ユーザは撮影装置３を移動させることにより所望のアングルの３Ｄモデルを見ることができ、作業内容を直感的に容易に理解できる。
【００５９】
ユーザが図４の映像に従って前カバー２０を開けると、状態情報取得部３８３は、前カバーセンサ３４の検出出力から、画像形成装置２は上記の用紙ジャムの解消のために前カバー２０が開けられた状態であると判断する。
【００６０】
このように画像形成装置２の状態が変わったため、マーカ表示制御部３８４は、マーカ表示部３５に表示するマーカのパターンを変更させる。これに応じて、重畳部３８６は、変更後のマーカのパターンに対応する電子情報を記憶部３６から取得し、これを撮影装置３からの映像に重畳する。
【００６１】
マーカのパターンが変更された後の電子情報が重畳された映像の一例を図５に示す。図５において、マーカ表示部３５には、「Ｅ−１２Ｂ」というパターンのマーカが表示されている。このパターンが、本実施の形態において上記の用紙ジャムの解消のために前カバー２０が開けられた状態に対応するパターンとする。
【００６２】
図５に示す映像では、用紙ジャムの発生位置を示すための丸印および矢印の画像と、用紙を取り除くことを指示するための文字情報５２とが、電子情報として重畳されている。ユーザは、この電子情報が重畳された映像に従って用紙を取り除くことにより、用紙ジャムを解消できる。
【００６３】
以上の図４、図５を用いて説明した例では、ユーザの作業による画像形成装置２の状態の変化に応じて、マーカのパターンを変更し、それに応じて映像に重畳する電子情報を変更している。つまり、ユーザが作業した手順を追って、マーカのパターン、および映像に重畳する電子情報が変更される。これに対し、ユーザが作業を行う前に、マーカのパターンを変更しないで、重畳部３８６が、現在の状態の画像形成装置２に対してユーザが行うべき作業の手順の各段階に対応する各電子情報を順次切り替えて映像に重畳するようにしてもよい。
【００６４】
すなわち、表示装置４において図４の映像を表示した後、所定時間経過すると、図６に示すような映像を表示するようにし、さらに所定時間経過すると図４の映像の表示に戻る。これを繰り返し、前カバー２０が開けられるまで、図４の映像と図６の映像とを交互に表示するようにする。
【００６５】
図６に示す映像は、前カバー２０がまだ開けられていない画像形成装置２の映像に、画像形成装置２の内部を示す画像５３と、図５と同様の用紙ジャムの発生位置を示すための丸印および矢印の画像と、文字情報５２とが重畳されているものである。この際、マーカ表示部３５の表示は、図４と同様の「Ｅ−１２Ａ」のパターンのままである。
【００６６】
このようにすることで、ユーザに予め作業内容をイメージさせることができる。ユーザは現在の状態の画像形成装置２に対してこれから行うべき作業の手順の各段階を予め確認できる。ユーザにより前カバー２０が開けられると、前述の説明と同様に、マーカ表示部３５に「Ｅ−１２Ｂ」を表示し、表示装置４の表示部４３に図５に示した映像を表示するようにすればよい。
【００６７】
以上説明したように本実施の形態では、画像形成装置２の状態に応じたパターンのマーカをマーカ表示部３５に表示し、撮影装置３で画像形成装置２を撮影した映像からマーカを検出し、マーカのパターンに応じた電子情報を画像形成装置２の映像に重畳する。ユーザの作業により画像形成装置２の状態が変化すると、それに応じてマーカのパターンを変え、画像形成装置２の状態に応じた電子情報を画像形成装置２の映像に重畳する。これにより、画像形成装置２の状態に応じてユーザが行うべき作業の内容をリアルタイムで映像に表示し、ユーザに作業の内容を容易に把握させることができ、作業効率を向上させることができる。
【００６８】
（変形例）
上記実施の形態では、マーカを検出する処理および映像に電子情報を重畳する処理を画像形成装置側で行ったが、本変形例では、これらの処理を表示装置側で行う。
【００６９】
図７は、本発明の実施の形態の変形例に係る画像形成システムの機能構成を示すブロック図である。図７に示すように、本変形例に係る画像形成システム１Ａは、画像形成装置２Ａと、撮影装置３と、表示装置４Ａとを備えて構成される。撮影装置３と表示装置４Ａとは有線または無線により接続されるが、画像形成装置２Ａは、撮影装置３および表示装置４Ａのいずれとも接続されていない。
【００７０】
本変形例の画像形成システム１Ａにおける画像形成装置２Ａは、上記実施の形態の画像形成システム１における画像形成装置２に対し、記憶部３６、映像取得部３７、および出力部３９を省略し、制御部３８を制御部３８Ａに置き換えた構成である。
【００７１】
制御部３８Ａは、図３に示した画像形成装置２の制御部３８に対し、マーカ検出部３８５および重畳部３８６を省略した構成である。本変形例では、これらの省略された機能は表示装置４Ａにより実行される。
【００７２】
表示装置４Ａは、映像取得部６１と、記憶部６２と、表示部６３と、制御部６４とを備える。
【００７３】
映像取得部６１は、撮影装置３で撮影された映像を取得する。
【００７４】
記憶部６２は、図３の画像形成装置２の記憶部３６と同様のものであり、画像形成装置２Ａのマーカ表示部３５に表示可能なマーカのパターンに対応して予め生成された電子情報を記憶している。
【００７５】
表示部６３は、撮影装置３で撮影された映像を表示する。
【００７６】
制御部６４は、ＣＰＵ、プログラム等を格納するメモリ等を備えて構成され、ＣＰＵがプログラムに応じた処理を行うこと等で、マーカ検出部６４１、重畳部６４２、表示制御部６４３が構成される。
【００７７】
マーカ検出部６４１は、図３の画像形成装置２のマーカ検出部３８５と同様のものであり、撮影装置３で撮影された映像上の、マーカ表示部３５に表示されているマーカの位置、向き、サイズを検出し、また、マーカのパターンを検出する。
【００７８】
重畳部６４２は、図３の画像形成装置２の重畳部３８６と同様のものであり、マーカ検出部６４１で検出したマーカのパターンに対応する電子情報を記憶部６２から取得し、この電子情報を撮影装置３で撮影された映像に重畳する。
【００７９】
表示制御部６４３は、表示部６３の表示を制御する。
【００８０】
次に、画像形成システム１Ａの動作について説明する。
【００８１】
画像形成装置２Ａは、自装置の状態に応じたパターンのマーカをマーカ表示部３５に表示するが、このマーカ表示までの動作については、前述の実施の形態で説明した図３の画像形成装置２における動作と同様であるため説明を省略する。画像形成装置２で行っていたマーカを検出する処理および映像に電子情報を重畳する処理は、本変形例では、表示装置４Ａで行う。
【００８２】
表示装置４Ａのマーカ検出部６４１は、映像取得部６１を介して撮影装置３で撮影された映像を取得すると、映像上のマーカの位置、向き、サイズを検出するとともに、マーカのパターンを検出する。
【００８３】
次いで、重畳部６４２は、マーカ検出部６４１で検出したマーカのパターンに対応する電子情報を記憶部６２から取得し、この電子情報を撮影装置３から取得した映像に重畳する。映像に重畳する電子情報の位置、向き、サイズは、マーカ検出部６４１で検出したマーカの位置、向き、サイズに基づいて決定される。
【００８４】
そして、表示制御部６４３は、電子情報が重畳された映像を表示部６３に表示するよう制御する。以上のように、マーカ検出部６４１、重畳部６４２、表示制御部６４３で行う処理内容は、前述の実施の形態で説明した、図３の画像形成システム１における画像形成装置２のマーカ検出部３８５、重畳部３８６、表示装置４の表示制御部４２と同様である。
【００８５】
このような本変形例の画像形成システム１Ａによっても、前述の実施の形態で説明した画像形成システム１と同様に、ユーザに作業の内容を容易に把握させることができ、作業効率を向上させることができる。
【００８６】
なお、上記実施の形態およびその変形例では、前カバー２０を開けるだけで用紙ジャムを解消する作業が行えるものとし、画像形成装置２，２Ａの状態に関する状態情報としては、用紙センサ３０ａ，３０ｂ，…の検出出力と、前カバーセンサ３４の検出出力とのみを扱う構成として説明したが、その他の各種のセンサ等を、画像形成装置２，２Ａの状態を検出するための構成に加えてもよい。
【００８７】
例えば、用紙ジャムを解消するために前カバー２０を開けてから画像形成装置２，２Ａの内部の構造体を引き出したり、他のカバーを開けたりする作業が必要な場合もある。このような場合、用紙ジャムを解消するための作業手順の各段階にある状態を検出できるようなセンサ等の検出出力を、状態情報として用いればよい。
【００８８】
また、用紙ジャムに限らず、他のエラー状態およびそのエラー状態を解除するための作業手順の各段階にある状態を検出できるようなセンサ等の検出出力を状態情報として用い、各状態に応じた電子情報を撮影装置３で撮影された映像に重畳するようにしてもよい。
【００８９】
また、本発明は、エラー状態の解除に限らず、例えば給紙トレイ２１２ａ〜２１２ｃに用紙をセットする作業の手順をユーザに示す用途などにも用いることができる。
【００９０】
また、上記実施の形態およびその変形例で説明に用いたようなインクジェット方式の画像形成装置に限らず、他の方式の印刷機構を有する画像形成装置にも本発明は適用可能である。
【符号の説明】
【００９１】
１，１Ａ  画像形成システム
２，２Ａ  画像形成装置
３  撮影装置
４，４Ａ  表示装置
２０  前カバー
３０ａ，３０ｂ，…  用紙センサ
３１  画像形成部
３２  搬送駆動部
３３  用紙検出部
３４  前カバーセンサ
３５  マーカ表示部
３６  記憶部
３７  映像取得部
３８，３８Ａ  制御部
３９  出力部
４０  マーカ
４１  入力部
４２  表示制御部
４３  表示部
６１  映像取得部
６２  記憶部
６３  表示部
６４  制御部
３８１  画像形成制御部
３８２  搬送制御部
３８３  状態情報取得部
３８４  マーカ表示制御部
３８５  マーカ検出部
３８６  重畳部
６４１  マーカ検出部
６４２  重畳部
６４３  表示制御部
【図１】
2011245792.tif 000003
【図２】
2011245792.tif 000004
【図３】
2011245792.tif 000005
【図４】
2011245792.tif 000006
【図５】
2011245792.tif 000007
【図６】
2011245792.tif 000008
【図７】
2011245792.tif 000009