(57)【特許請求の範囲】
【請求項１】
複数の記入欄から構成される記入用紙を、表示パネルを通してユーザーに見せながら各記入欄に記入させる記入システムであって、
現在記入中の記入欄を検出する検出手段と、
現在記入中の記入欄を検出した場合に、未記入の記入欄が残存するか否かを判定する判定手段と、
前記判定手段が未記入の記入欄が残存すると判定した場合に、前記表示パネルを通したユーザーの視界内において、検出した前記記入欄への記入中にユーザーが注目している注目領域を特定し、特定した注目領域の少なくとも一部に重畳するように未記入の記入欄が残存する旨を示す警告画像を前記表示パネルに表示させる表示制御手段と、
を備えることを特徴とする記入システム。
【請求項２】
前記注目領域は、検出した前記記入欄の前記表示パネルにおける表示領域である
ことを特徴とする請求項１記載の記入システム。
【請求項３】
現在記入中の記入欄を検出した場合に、前記表示パネルにおいてユーザーの視線が向いている領域を検出する視線検出手段を備え、
前記注目領域は、前記視線検出手段が検出した領域である
ことを特徴とする請求項１記載の記入システム。
【請求項４】
前記複数の記入欄は順序付けされており、
前記判定手段による未記入の記入欄の残存の有無の判定対象となる未記入欄は、検出した前記記入欄より前記順序が上位の未記入欄である
ことを特徴とする請求項1〜３の何れかに記載の記入システム。
【請求項５】
前記警告画像は、検出した前記記入欄より前記順序が上位の未記入欄の内、検出した前記記入欄の前記順序に最も近い前記順序の未記入欄を示す画像である
ことを特徴とする請求項４に記載の記入システム。
【請求項６】
前記判定手段は、未記入の記入欄が残存すると判定した場合に、さらに未記入の記入欄の総数が閾値以下か否かを判定し、
前記表示制御手段は、未記入の記入欄の総数が閾値以下の場合には、検出した前記記入欄の前記順序に最も近い前記順序の未記入欄を示す警告画像の代わりに検出した前記記入欄より前記順序が上位の全ての未記入欄を示す警告画像を前記注目領域の少なくとも一部に重畳するように表示させる
ことを特徴とする請求項５記載の記入システム。
【請求項７】
前記判定手段は、未記入の記入欄が残存しないと判定した場合に、さらに検出した前記記入欄より前記順序が下位の記入欄の内、未記入の記入欄が存在するか否かを判定し、
検出した前記記入欄より前記順序が下位の未記入の記入欄が存在し、かつ、検出した前記記入欄より前記順序が下位の記入欄が全て未記入でない場合に、前記表示制御手段は、検出した前記記入欄より前記順序が下位の未記入の記入欄の内、検出した前記記入欄の前記順序に最も近い前記順序の未記入の記入欄を示す警告画像を前記注目領域の少なくとも一部に重畳するように表示させる
ことを特徴とする請求項５に記載の記入システム。
【請求項８】
前記表示制御手段は、検出した前記記入欄より前記順序が下位の未記入の記入欄が存在し、存在する未記入の記入欄が１つである場合には、当該未記入の記入欄を示す警告画像を前記注目領域の少なくとも一部に重畳するように表示させる
ことを特徴とする請求項７に記載の記入システム。
【請求項９】
前記警告画像は、検出した前記記入欄より前記順序が上位の未記入の記入欄の総数を示す画像である
ことを特徴とする請求項４に記載の記入システム。
【請求項１０】
複数の記入欄から構成される記入用紙を、表示パネルを通してユーザーに見せながら各記入欄に記入させる記入方法であって、
現在記入中の記入欄を検出する検出ステップと、
現在記入中の記入欄を検出した場合に、未記入の記入欄が残存するか否かを判定する判定ステップと、
前記判定ステップが未記入の記入欄が残存すると判定した場合に、前記表示パネルを通したユーザーの視界内において、検出した前記記入欄への記入中にユーザーが注目している注目領域を特定し、特定した注目領域の少なくとも一部に重畳するように未記入の記入欄が残存する旨を示す警告画像を前記表示パネルに表示させる表示制御ステップと、
を含むことを特徴とする記入方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、記入用紙の記入欄への記入を支援する技術に関し、特に記入欄への記入漏れを防ぐ技術に関する。
【背景技術】
【０００２】
近年、記入用紙への記入に際し、ユーザーに対して記入欄への記入に関する情報を提供
することが可能な記入システムが利用されるようになってきている。
例えば、特許文献１には、電子ペンで記入した記入用紙に未記入の記入欄がある場合に、
記入データを受け付けた受付端末の表示装置に記入用紙の未記入欄を強調表示する技術が
開示されている。
【０００３】
これにより、ユーザーは、記入用紙の記入欄への記入漏れがあった場合に、記入漏れが
あった未記入欄を視認することができ、記入漏れが生じないようにすることができる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−１２７１９７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記の記入システムでは、記入用紙の未記入欄内において未記入があることが強調表示されるので、例えば、ユーザーが記入済みの欄を注視しているような場合には、未記入欄が強調表示されてもそのことに気づかず、見逃してしまう場合が生じ得る。
本発明は、上述のような問題に鑑みて為されたものであって、記入用紙に未記入欄があることを示す表示が見逃されないようにすることが可能な記入システム及び記入方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明の一形態に係る記入システムは、複数の記入欄から構成される記入用紙を、表示パネルを通してユーザーに見せながら各記入欄に記入させる記入システムであって、現在記入中の記入欄を検出する検出手段と、現在記入中の記入欄を検出した場合に、未記入の記入欄が残存するか否かを判定する判定手段と、前記判定手段が未記入の記入欄が残存すると判定した場合に、前記表示パネルを通したユーザーの視界内において、検出した前記記入欄への記入中にユーザーが注目している注目領域を特定し、特定した注目領域の少なくとも一部に重畳するように未記入の記入欄が残存する旨を示す警告画像を前記表示パネルに表示させる表示制御手段と、を備える
ここで、前記注目領域は、検出した前記記入欄の前記表示パネルにおける表示領域であることとすることができる。又、現在記入中の記入欄を検出した場合に、前記表示パネルにおいてユーザーの視線が向いている領域を検出する視線検出手段を備え、前記注目領域は、前記視線検出手段が検出した領域であることとすることができる。
【０００７】
又、前記複数の記入欄は順序付けされており、前記判定手段による未記入の記入欄の残存の有無の判定対象となる未記入欄は、検出した前記記入欄より前記順序が上位の未記入欄であることとすることができる。
さらに、前記警告画像は、検出した前記記入欄より前記順序が上位の未記入欄の内、検出した前記記入欄の前記順序に最も近い前記順序の未記入欄を示す画像であることとすることができる。
又、前記判定手段は、未記入の記入欄が残存すると判定した場合に、さらに未記入の記入欄の総数が閾値以下か否かを判定し、前記表示制御手段は、未記入の記入欄の総数が閾値以下の場合には、検出した前記記入欄の前記順序に最も近い前記順序の未記入欄を示す警告画像の代わりに検出した前記記入欄より前記順序が上位の全ての未記入欄を示す警告画像を前記注目領域の少なくとも一部に重畳するように表示させることとすることができる。
【０００８】
又、前記判定手段は、未記入の記入欄が残存しないと判定した場合に、さらに検出した前記記入欄より前記順序が下位の記入欄の内、未記入の記入欄が存在するか否かを判定し、検出した前記記入欄より前記順序が下位の未記入の記入欄が存在し、かつ、検出した前記記入欄より前記順序が下位の記入欄が全て未記入でない場合に、前記表示制御手段は、検出した前記記入欄より前記順序が下位の未記入の記入欄の内、検出した前記記入欄の前記順序に最も近い前記順序の未記入の記入欄を示す警告画像を前記注目領域の少なくとも一部に重畳するように表示させることとすることができる。
【０００９】
さらに、前記表示制御手段は、検出した前記記入欄より前記順序が下位の未記入の記入欄が存在し、存在する未記入の記入欄が１つである場合には、当該未記入の記入欄を示す警告画像を前記注目領域の少なくとも一部に重畳するように表示させることとすることができる。又、前記警告画像は、検出した前記記入欄より前記順序が上位の未記入の記入欄の総数を示す画像であることとすることができる。
【００１０】
又、本発明の一形態に係る記入方法は、複数の記入欄から構成される記入用紙を、表示パネルを通してユーザーに見せながら各記入欄に記入させる記入方法であって、現在記入中の記入欄を検出する検出ステップと、現在記入中の記入欄を検出した場合に、未記入の記入欄が残存するか否かを判定する判定ステップと、前記判定ステップが未記入の記入欄が残存すると判定した場合に、前記表示パネルを通したユーザーの視界内において、検出した前記記入欄への記入中にユーザーが注目している注目領域を特定し、特定した注目領域の少なくとも一部に重畳するように未記入の記入欄が残存する旨を示す警告画像を前記表示パネルに表示させる表示制御ステップと、を含むこととすることができる。
【発明の効果】
【００１１】
上記構成を備えることにより、記入用紙の記入欄への記入中において未記入の記入欄の残存の有無が判定され、未記入の記入欄が残存する場合に、表示パネルを通したユーザーの視界内において、上記記入中にユーザーが注目している注目領域が特定され、特定した注目領域の少なくとも一部に重畳するように未記入の記入欄が有る旨を示す警告画像が表示されるので、ユーザーは警告画像の表示に容易に気づくことができ、記入中において未記入欄があることを示す表示を見逃さないようにすることができる。
【図面の簡単な説明】
【００１２】
【図１】記入システムの概略図である。
【図２】表示端末１０の構成を示す機能ブロック図である。
【図３】表示端末１０が行う記入用紙記入支援処理の動作を示すフローチャートである。
【図４】図３の記入処理支援処理による動作の具体例を示すテーブルである。
【図５】記入用紙の記入欄のレイアウトを示す図である
【図６】図４の時刻Ｔ５の時点において、表示パネル１１０に表示される警告画像を示す。
【図７】変形例の記入システムの概略図である。
【図８】表示端末１０Ａの構成を示す機能ブロック図である。
【図９】表示端末１０Ａが行う記入用紙記入支援処理の動作の変形例を示すフローチャートである。
【図１０】表示端末１０Ａに表示される警告画像の表示例を示す。
【図１１】別の変形例の記入システムの概略図である。
【図１２】図１１の記入システムの構成を示す機能ブロック図である。
【図１３】ＰＣ２０が行う記入用紙記入支援処理の動作を示す図である。
【図１４】ＨＭＤ３０が行う警告画像表示処理の動作を示すフローチャートである。
【図１５】図３の記入用紙記入支援処理の動作の変形例を示すフローチャートである。
【図１６】図３の記入用紙記入支援処理の動作の別の変形例を示すフローチャートである。
【図１７】図１６の記入処理支援処理による動作の具体例を示すテーブルである。
【図１８】図１６の記入処理支援処理による動作の別の具体例を示すテーブルである。
【発明を実施するための形態】
【００１３】
(実施の形態)
［１］記入システムの構成
図１（a）は、本実施の形態に係る記入システムの概略図である。記入システム１は、記入用紙Ｓを載置する載置台２と、撮影部１０９と表示パネル１１０とを備える平板状の表示端末１０と、載置台２に固定されて載置台２の載置面と表示端末１０の主面とが略平行となるように表示端末１０を支持する支持部材３とから構成される。
【００１４】
撮影部１０９は、載置台２の載置面に載置された記入用紙Ｓを撮影可能なように載置面と対向する側の表示端末１０の主面（表示パネル１０９が配置される主面と反対側の表示端末１０の主面）（図１（ｂ）参照）に配置され、撮影画像が歪まないように撮影部１０９の撮影レンズの光軸は、載置面と略垂直に交差するように構成されている。
図２は、表示端末１０の構成を示す機能ブロック図である。表示端末１０は、所謂コンピューターであって、ＣＰＵ１００、無線通信部１０１、ＲＯＭ１０２、ＲＡＭ１０３、記入位置検出部１０４、記入状況管理部１０５、警告画像作成部１０６、表示制御部１０７、記入用紙情報記憶部１０８、撮影部１０９、表示パネル１１０等から構成される。
【００１５】
無線通信部１０１は、不図示の無線ルーターと無線通信し、無線ルーターを介してＬＡＮ（Local Area Network）等のネットワークに接続する。ＲＯＭ１０２には、表示端末１０全体を制御するためのプログラム、後述する記入用紙記入支援処理を実行するプログラム等が記憶されている。ＲＡＭ１０３は、ＣＰＵ１００のプログラム実行時のワークエリアとして用いられる。
【００１６】
記入位置検出部１０４は、後述する記入用紙記入支援処理を実行している間、順序付けられた複数の記入欄から構成される記入用紙において、現在記入されている記入欄（以下、「記入中記入欄」という）を検出する。
具体的には、以下のようにして当該記入中記入欄を検出する。
記入位置検出部１０４は、撮影部１０９により撮影された記入用紙の画像データから、記入に用いられるペンのペン先の位置を検出し、当該検出位置が記入欄内にあるか否かを、記入用紙情報記憶部１０８に記憶されている当該記入用紙の各番号の記入欄の表示領域の座標範囲を示す座標情報を参照して判定する。ペン先の位置の検出は、例えば、記入用紙への記入に用いるペンのペン先部分の撮影画像の画像データを予め記入用紙情報記憶部１０８に記憶しておき、撮影部１０９により撮影された画像の画像データを解析して、記憶されている画像データと特徴部が一致する領域を撮影された画像領域から抽出することにより、行うことができる。
【００１７】
そして、当該検出位置が何れかの記入欄内にある場合に、記入位置検出部１０４は、当該記入欄において現在記入がされているか否かを、連続して撮影される記入用紙の画像データの画素数の差分をとることにより判定し、当該記入欄において画素数が変化している場合に当該記入欄において現在記入がされていると判定する。
ここでは、記入用紙に座標位置の基準点となるマークが予め印刷されており、記入用紙は、当該マークが撮影可能な位置に載置されるものとする。当該マークは、例えば、図１（a）に示す記入用紙の符号Ａで示す位置に印刷されているものとする。記入用紙の各記入欄の位置は、当該基準点に対する相対座標位置として表されるものとし、上記の検出位置は、当該基準点に対する相対座標位置として検出されるものとする。
【００１８】
記入状況管理部１０５は、後述する記入用紙記入支援処理開始後、記入位置検出部１０４が現在記入されている記入欄の位置を検出する毎に、記入用紙情報記憶部１０８に記憶されている座標情報を参照して当該記入欄の番号を特定して記入状況テーブルにおいて、当該番号の記入状況フラグを「記入済み」に設定する。
ここで、「記入状況テーブル」とは、記入用紙の記入欄の番号と記入状況フラグとの対応関係を示すテーブルのこといい、記入用紙情報記憶部１０８に記憶されている。又、「記入状況フラグ」とは、記入欄が「未記入」であるか「記入済み」であるかを示すフラグのことをいう。
【００１９】
記入状況管理部１０５は、さらに記入状況テーブルの各記入欄の記入状況フラグを参照して記入中記入欄より記入欄番号が上位の記入欄に未記入の記入欄があるか否かを判定する。
警告画像作成部１０６は、記入用紙情報記憶部１０８に記憶されている警告画像の元画像データを読み出して、当該元画像データに基づいて表示パネル１１０に表示するための警告画像（記入中記入欄より記入欄番号が上位の記入欄に未記入の記入欄（記入漏れ）があることを示す警告画像）を作成する。ここでは、図６に示すように、「前の記入欄に記入漏れがあります」というメッセージを示す警告画像が作成されるものとする。なお、同図においては、説明の便宜上、ペンを持つユーザーの手の画像の表示は省略されている。
【００２０】
表示制御部１０７は、撮影部１０９により撮影された記入用紙の画像を表示パネル１１０に表示させるとともに、記入中記入欄より記入欄番号が上位の記入欄に未記入の記入欄がある場合に、当該上位の記入欄に未記入欄があることを示す警告画像を表示パネル１１０に表示すべき領域を、表示パネル１１０を通したユーザーの視界内において、記入中記入欄への記入中にユーザーが現在注目している注目領域に基づいて決定し、警告画像作成部１０６により作成された警告画像を決定した領域に表示させる。
【００２１】
具体的には、表示制御部１０７は、記入中記入欄の表示領域を、上記の注目領域と特定し、当該注目領域の少なくとも一部に重畳させることが可能な領域を、警告画像を表示すべき領域として決定し、決定した領域に警告画像を当該注目領域の少なくとも一部に重畳するように表示パネル１１０に表示させる。
例えば、表示制御部１０７は、図６に示すように、記入中記入欄（記入欄番号６の記入欄）の左端から所定サイズの矩形型の吹き出し形状の警告画像の左端までの距離、及び当該記入中記入欄の右端から当該警告画像の右端までの距離がそれぞれ、等距離（例えば、当該記入欄の水平方向の幅の１／４の距離）で、記入中記入欄の上の罫線から当該警告画像の下端（吹き出し部分の先端）までの垂直方向の距離が所定の距離（例えば、現在記入されている記入欄の上下の罫線間の距離の１／６の距離）となる領域を、警告画像を表示すべき領域として決定し、決定した領域に警告画像を注目領域（記入欄番号６の表示領域）の一部に重畳するように表示させることができる。
【００２２】
記入用紙情報記憶部１０８は、記入用紙の各記入欄の位置の座標範囲を示す座標情報、記入状況テーブル、警告画像の元画像データ、ペン先部分の画像データ等を記憶している。
撮影部１０９は、後述する記入用紙記入支援処理を実行している間、載置台２の載置面に載置された記入用紙を撮影し、例えば毎秒３０〜５０の記入用紙のフレーム画像を取得する。表示パネル１１０は、後述する記入用紙記入支援処理を実行している間、撮影部１０９により撮影された記入用紙の画像を表示し、記入状況管理部１０５により記入中記入欄より記入欄番号が上位の記入欄に未記入の記入欄があると判定された場合に、表示制御部１０７が決定した領域に警告画像を表示する。
【００２３】
［２］記入用紙記入支援処理
図３は、表示端末１０が行う記入用紙記入支援処理の動作を示すフローチャートである。表示端末１０は、警告画像の表示状態を示す表示フラグを、警告画像が非表示であることを示すオフに、記入状況テーブルの各記入欄番号の記入状況フラグを「未記入」にそれぞれ設定し（ステップＳ３０１）、記入用紙の記入欄への記入の発生を監視し、記入欄への記入を検出すると（ステップ３０２：ＹＥＳ）、記入を検出した記入欄番号（Ｘ）を記入中記入欄の記入欄番号として特定し（ステップＳ３０３）、記入状況テーブルにおいて、Ｘに対応する記入状況フラグを「記入済み」に設定する（ステップＳ３０４）。
【００２４】
次に、表示端末１０は、Ｘが１でなければ（ステップＳ３０５：ＮＯ）、変数ＹをＸに設定した後（ステップＳ３０６）、変数Ｙの値を１デクリメントし（ステップＳ３０７）、記入状況テーブルにおいて、記入欄番号Ｙに対応する記入状況フラグを参照して記入欄番号Ｙの記入欄が未記入であるか否かを判定する（ステップＳ３０８）。
そして、記入欄番号Ｙの記入欄が未記入でない（記入済みである）場合に（ステップＳ３０８：ＮＯ）、表示端末１０は、Ｙが１か否かを判定する（ステップＳ３０９）。
【００２５】
Ｙが１でない場合には（ステップＳ３０９：ＮＯ）、表示端末１０は、ステップＳ３０７の処理に移行し、Ｙが１であれば（ステップＳ３０９：ＹＥＳ）、表示フラグがオンか否かを判定する（ステップＳ３１０）。
表示フラグがオンの場合に（ステップＳ３１０：ＹＥＳ）、表示パネル１１０に表示中の警告画像を非表示にして表示フラグをオフに設定し（ステップＳ３１１）、記入状況テーブルを参照して全ての記入欄が記入済みであるか否かを判定する（ステップＳ３１２）。
【００２６】
表示フラグがオンでない（オフ）の場合（ステップＳ３１０：ＮＯ）、表示端末１０は、ステップＳ３１２の処理に移行する。
又、ステップＳ３０８において、記入欄番号Ｙの記入欄が未記入である場合（ステップＳ３０８:ＹＥＳ）、表示端末１０は、記入を検出した記入中記入欄の表示領域を注目領域と特定し、注目領域に基づいて表示パネル１１０において警告画像を表示すべき領域を決定し（ステップＳ３１３）、表示フラグがオンでない（オフ）の場合には（ステップＳ３１４：ＮＯ）、表示フラグをオンに設定し（ステップＳ３１５）、警告画像を作成して決定した領域に作成した警告画像を注目領域の少なくとも一部に重畳するように表示させる（ステップＳ３１７）。
【００２７】
ステップＳ３１４において、表示フラグがオンである場合には（ステップＳ３１４：ＹＥＳ）、表示端末１０は、表示パネル１１０に表示中の警告画像を非表示にし（ステップＳ３１６）、ステップ３１７の処理に移行する。又、ステップＳ３０５において、Ｘが１の場合には（ステップＳ３０５：ＹＥＳ）、表示端末１０は、ステップ３１０の処理に移行する。
【００２８】
図４は、上記の記入処理支援処理による動作の具体例を示すテーブルである。同図の具体例は、記入用紙の記入欄が１番から１０番まで順序付けられ、各記入欄が図５に示すようなレイアウトで配置された場合の動作例を示す。図４のＴ１〜Ｔ１０は、記入欄への記入時刻を示し、数字の昇順に時間が経過していることを示す。同図の丸印は、対応する記入欄が記入済みであることを示し、×印は、対応する記入欄が未記入であることを示す。
【００２９】
例えば、時刻Ｔ１では、記入欄番号が１番の記入欄が「記入済み」で、それ以外の記入欄が「未記入」であることを示し、時刻Ｔ５では、記入欄番号が１番〜４番と６番の記入欄が「記入済み」で、それ以外の記入欄が「未記入」であることを示す。
同図の具体例においては、記入欄番号が、１番、２番、３番、４番、６番、５番、７番、９番、８番、１０番の順に記入欄への記入がされたことを示している。
【００３０】
又、同図のテーブルの最下欄は、対応する時刻における警告画像の表示の有無を示す欄であり、「有」は警告画像が表示されることを、「無」は、警告画像が表示されないことを示す。
時刻Ｔ１の時点においては、図３の記入処理支援処理において記入欄番号が１番の記入欄への記入が検出され（ステップＳ３０２：ＹＥＳ）、Ｘ＝１となり（ステップＳ３０５：ＹＥＳ）、警告画像は表示されない（ステップＳ３１０：ＮＯ、ステップＳ３１２：ＮＯ）。
【００３１】
時刻Ｔ２の時点においては、図３の記入処理支援処理において記入欄番号が２番の記入欄への記入が検出され（ステップＳ３０２：ＹＥＳ）、Ｘ＝２となり（ステップＳ３０５：ＮＯ）、記入中記入欄番号２より上位の記入欄番号１は、未記入でないので警告画像は表示されない（ステップＳ３０８：ＮＯ、ステップＳ３０９：ＹＥＳ、ステップＳ３１０：ＮＯ、ステップＳ３１２：ＮＯ）。
【００３２】
時刻Ｔ３、Ｔ４の各時点においても、時刻Ｔ２の時点と同様に記入中記入欄番号（時刻Ｔ３では、記入欄番号３、時刻Ｔ４では、記入欄番号４）より上位の記入欄番号（時刻Ｔ３では、記入欄番号１、２、時刻Ｔ４では、記入欄番号１〜３）は、未記入でないので警告画像は表示されない。
時刻Ｔ５の時点においては、図３の記入処理支援処理において記入欄番号が６番の記入欄への記入が検出され（ステップＳ３０２：ＹＥＳ）、Ｘ＝６となり（ステップＳ３０５：ＮＯ）、記入中記入欄番号６より上位の記入欄番号５が未記入であるので（ステップＳ３０８：ＹＥＳ）、ステップ３１３において決定した領域に警告画像が注目領域の少なくとも一部に重畳するように表示される（ステップＳ３１３、ステップＳ３１４：ＮＯ、ステップＳ３１５、ステップＳ３１７）。
【００３３】
時刻Ｔ６においては、図３の記入処理支援処理において、未記入であった記入欄番号が５番の記入欄への記入が検出され（ステップＳ３０２：ＹＥＳ）、Ｘ＝５となり（ステップＳ３０５：ＮＯ）、記入中記入欄番号５より上位の記入欄番号１〜４に未記入欄がなくなる（ステップＳ３０８：ＮＯ）。又、時刻Ｔ５の時点において警告画像が表示されているので（ステップＳ３１０：ＹＥＳ）、表示中の警告画像は非表示にされる（ステップＳ３１１、ステップＳ３１２）。
【００３４】
時刻Ｔ７においては、時刻Ｔ２の時点と同様に記入中記入欄番号７より上位の記入欄番号（記入欄番号１〜６）は、未記入でないので警告画像は表示されない。
時刻Ｔ８の時点においては、時刻Ｔ５の時点と同様に、記入中記入欄番号９より上位の記入欄番号８が未記入であるので（ステップＳ３０８：ＹＥＳ）、ステップ３１３において決定した領域に警告画像が注目領域の少なくとも一部に重畳するように表示される（ステップＳ３１３、ステップＳ３１４：ＮＯ、ステップＳ３１５、ステップＳ３１７）。
【００３５】
時刻Ｔ９においては、時刻Ｔ６の時点の場合と同様に、未記入であった記入欄番号８の記入欄への記入がなされ、記入中記入欄番号８より上位の記入欄番号１〜７に未記入欄がなくなるので、時刻Ｔ８の時点において表示された警告画像が非表示にされる。
時刻Ｔ１０においては、全ての記入欄番号の記入欄が記入済みになるので（ステップＳ３１２：ＹＥＳ）、記入処理支援処理が終了する。
【００３６】
図６は、時刻Ｔ５の時点において、表示パネル１１０に表示される警告画像Ｇ１を示す。同図に示すように、時刻Ｔ５の時点において警告画像Ｇ１は、注目領域（記入中記入欄（記入欄番号６の記入欄）の表示領域）の上端部（一部）に重畳するように表示されている。図示していないが、時刻Ｔ８の時点においても時刻Ｔ５の時点の場合と同様に、警告画像が注目領域（記入中記入欄（記入欄番号９の記入欄）の表示領域）の上端部（一部）に重畳するように表示される。
【００３７】
このように、本実施の形態に係る記入システムでは、記入用紙への記入中において、記入中記入欄よりも順番が上位の記入欄が未記入であった場合に、未記入欄があることを示す警告画像が、表示パネル１１０を通したユーザーの視界内において、ユーザーが注目している注目領域の少なくとも一部に重畳するように表示されるので、ユーザーは警告画像に容易に気づくことができ、記入中において未記入欄があることを示す表示を見逃さないようにすることができる。
（変形例）
以上、本発明を実施の形態に基づいて説明してきたが、本発明が上述の実施の形態に限定されないのは勿論であり、以下のような変形例を実施することができる。
【００３８】
（１）上記の実施の形態では、記入用紙記入支援処理において、記入中記入欄の表示領域を注目領域と特定することとしたが、表示パネル１１０において記入中のユーザーの視線が向いている領域を、視線センサーを用いて検出して当該領域を注目領域と特定することとしてもよい。
図７は、本変形例に係る記入システムの概略図である。同図に示すように、本変形例に係る記入システム１Ａは、表示端末１０Ａが視線センサー１１１を備える点において上記の実施の形態に係る記入システム１と相違する。図８は、表示端末１０Ａの構成を示す機能ブロック図である。
【００３９】
以下図７、図８を参照して本変形例に係る記入システム１Ａと上記の実施の形態に係る記入システム１との相違点について説明し、両者に共通する構成要素については、同一の番号及び符号を付与して説明を省略する。
視線センサー１１１は、プルキニエ像を取得するためにユーザーの眼に向けて赤外光を照射する発光素子と、ユーザーの眼を含む領域を撮影するイメージセンサーとから構成され、プルキニエ像を用いる角膜反射法によりユーザーの視線方向を測定し、測定結果を注視領域算出部１００１に出力する。
【００４０】
注視領域算出部１００１は、視線センサー１１１から入力された測定結果に基づいて、表示パネル１１０においてユーザーの視線が向いている領域を算出して求める。
図９は、表示端末１０Ａが行う記入用紙記入支援処理の動作の変形例を示すフローチャートである。上記の実施形態の図３の記入用紙記入支援処理と同一の処理内容については、同一のステップ番号を付与して説明を省略し、以下相違点について説明する。
【００４１】
表示端末１０Ａは、ステップＳ３０８において記入欄番号Ｙの記入欄が未記入である場合に（ステップＳ３０８：ＹＥＳ）、視線センサー１１１の現在の測定結果に基づいて表示パネル１１０においてユーザーの視線が向いている領域を算出し、算出した領域を注目領域と特定し、注目領域に基づいて表示パネル１１０において警告画像を表示すべき領域を決定する（ステップＳ９０１）。具体的には、表示端末１０Ａは、算出した領域全体に重畳させることが可能な領域を、警告画像を表示すべき領域として決定する。そして、ステップＳ９０２において、決定した領域に警告画像を注目領域全体（算出した領域全体）に重畳するように表示させる。
【００４２】
例えば、表示端末１０Ａは、図１０に示すように、算出した領域（点線の丸で示す領域）全体に所定サイズの矩形型の吹き出し形状の警告画像Ｇ２が右上端部において重畳する領域を、警告画像を表示すべき領域として決定することができる。なお、同図においては、図６の場合と同様に、ペンを持つユーザーの手の画像の表示は省略されている。
このように、本変形例に係る記入システムでは、記入用紙への記入中において、記入中記入欄よりも順番が上位の記入欄が未記入であった場合に、未記入欄があることを示す警告画像が、表示パネルにおいてユーザーの視線が向いている領域全体に重畳するように表示されるので、ユーザーは警告画像に容易に気づくことができ、記入中において未記入欄があることを見逃さないようにすることができる。
【００４３】
（２）記入システムの構成は、上記の実施の形態及び変形例（１）の構成に限定されず、図１１に示すように、記入システムを載置台２、ＰＣ（Personal Computer）２０、ヘッドマウントディスプレイ（ＨＭＤ）３０、ＰＣ２０と接続された板状の圧力感知センサー４０から構成することとしてもよい。本変形例の記入システム１Ｂにおいては、記入用紙Ｓを、載置台２上に配置された圧力感知センサー４０上の所定の位置に固定部材Ｔ（例えば、ドラフティングテープ）で固定した状態でユーザーがペンを記入用紙Ｓに接触させた接触位置の座標を圧力感知センサー４０により検出して記入用紙Ｓへの記入位置を検出する。そして、ＰＣ２０は、検出結果に基づいて、記入中記入欄番号を特定し、ヘッドマウントディスプレイ３０に送信する。
【００４４】
図１２は、本変形例の記入システム１Ｂの構成を示す機能ブロック図である。以下、図１２を参照して記入システム１Ｂの機能構成について説明する。ＰＣ２０は、ＣＰＵ２００、通信インターフェース（Ｉ／Ｆ）部２０１、ＲＯＭ２０２、ＲＡＭ２０３、記入欄特定部２０４、、警告画像表示調整部２０５、記入用紙情報記憶部２０６、入力操作部２０７、表示部２０８等から構成される。
【００４５】
通信Ｉ／Ｆ部２０１は、ＬＡＮカード、ＬＡＮボードといったＬＡＮに接続するためのインターフェースである。ＲＯＭ２０２には、圧力感知センサー４０を制御するためのプログラム、後述する記入用紙記入支援処理を実行するプログラム等が記憶されている。
ＲＡＭ２０３は、ＣＰＵ２００のプログラム実行時のワークエリアとして用いられる。
記入欄特定部２０４は、後述する記入用紙記入支援処理を実行している間、圧力感知センサー４０の検出結果に基づいて順序付けられた複数の記入欄から構成される記入用紙における記入中記入欄の記入欄番号を特定する。
【００４６】
具体的には、記入欄特定部２０４は、圧力感知センサー４０よりペンの筆記圧力が検出された位置の位置座標を取得する毎に、記入用紙情報記憶部２０６に記憶されている当該記入用紙の各記入欄番号の記入欄の位置座標の座標範囲（以下、「位置座標範囲」という。）を示す記入欄位置情報を参照して、取得した位置座標が記入用紙の何れかの記入欄の位置座標範囲内に入る場合に、記入欄への記入があったことを検出し、記入を検出した記入欄の記入欄番号を、記入中記入欄の記入欄番号として特定する。
【００４７】
さらに、記入欄特定部２０４は、記入中記入欄の記入欄番号を特定する毎に、記入用紙情報記憶部２０６に記憶されている記入状況テーブルにおいて、当該記入欄番号の記入状況フラグを「記入済み」に設定する。
警告画像表示調整部２０５は、記入欄特定部２０４が記入中記入欄の記入欄番号を特定する毎に、記入状況テーブルを参照して、記入中記入欄より記入欄番号が上位の記入欄に未記入の記入欄があるか否かを判定し、未記入の記入欄がある場合に、特定した記入欄番号と警告画像の表示指示を、通信Ｉ／Ｆ部２０１を介してＨＭＤ３０に送信する。又、後述する記入用紙記入支援処理の説明において詳述するように、警告画像表示調整部２０５は、表示フラグの設定状態に応じて警告画像の非表示指示を通信Ｉ／Ｆ部２０１を介してＨＭＤ３０に送信する。
【００４８】
記入用紙情報記憶部２０６は、記入欄位置情報、記入状況テーブル等を記憶している。
入力操作部２０７は、キーボード、マウス等の入力デバイス等から構成され、入力デバイスを通してユーザーからの操作指示を受け付ける。例えば、後述する記入用紙記入支援処理を実行するプログラムの開始指示を受け付ける。
表示部２０８は、液晶ディスプレイ等から構成され、プログラムの開始指示や終了指示を受け付けるための画面等を表示する。
【００４９】
ＨＭＤ３０は、ユーザーの頭部に装着される眼鏡型の端末であり、眼鏡部分に表示パネル（眼鏡型表示パネル３０８）を備える。ＨＭＤ３０は、ＣＰＵ３００、無線通信部３０１、ＲＯＭ３０２、ＲＡＭ３０３、記憶部３０４、警告画像作成部３０５、表示制御部３０６、撮影部３０７、眼鏡型表示パネル３０８、入力操作部３０９等から構成される。
無線通信部３０１は、不図示の無線ルーターと無線通信し、無線ルーターを介してＬＡＮに接続し、ＰＣ２０と通信する。ＲＯＭ３０２には、ＨＭＤ３０全体を制御するためのプログラム、後述する記入用紙記入支援処理の実行時に起動される警告画像表示処理を実行するプログラム等が記憶されている。ＲＡＭ３０３は、ＣＰＵ３００のプログラム実行時のワークエリアとして用いられる。
【００５０】
記憶部３０４は、記入用紙の各記入欄に付加された記入欄照合用のマークと記入欄番号との対応関係を示す記入欄特定テーブル、警告画像の元画像データ等を記憶している。本変形例の記入システム１Ｂに用いられる記入用紙Ｓの各記入欄には、撮像画像から各記入欄の表示領域を特定するためのマーク（例えば、記入欄毎に形状、色、模様等が互いに異なるマーク）が所定の位置（例えば、矩形状の記入欄の左上、右上、左下、右下の各端部の位置）に予め付加されている。
【００５１】
警告画像作成部３０５は、記憶部３０４に記憶されている警告画像の元画像データを読み出して、当該元画像データに基づいて眼鏡型表示パネル３０８に表示するための警告画像を作成する。
表示制御部３０６は、撮影部３０７により撮影された記入用紙の画像を眼鏡型表示パネル３０８に表示させる。又、表示制御部３０６は、ＰＣ２０から記入中記入欄の記入欄番号と警告画像の表示指示を受信すると、記入欄特定テーブルを参照して当該記入欄番号に対応する記入欄照合用マークを特定し、さらに、当該時点において撮影部３０７により撮影された記入用紙の画像の画像データを解析して、特定した記入欄照合用マークと一致するマークの位置を特定することにより、眼鏡型表示パネル３０８に表示されている撮影画像における記入中記入欄の表示領域を特定する。
【００５２】
そして、表示制御部３０６は、上記の実施の形態の場合と同様にして特定した記入中記入欄の表示領域を、眼鏡型表示パネル３０８を通したユーザーの視界内において、ユーザーが現在注目している注目領域と特定し、当該注目領域の少なくとも一部に重畳させることが可能な領域を、警告画像を表示すべき領域として決定し、決定した領域に警告画像を当該注目領域の少なくとも一部に重畳するように眼鏡型表示パネル３０８に表示させる。
【００５３】
又、表示制御部３０６は、ＰＣ２０から警告画像非表示指示を受信した場合に、表示中の警告画像を非表示にさせる。
撮影部３０７は、ＨＭＤ３０の装着者が見ている光景を撮影する。ここでは、後述する記入用紙記入支援処理を実行している間、圧力感知センサー４０上に載置されている記入用紙Ｓを撮影し、例えば毎秒３０の記入用紙Ｓのフレーム画像を取得する。眼鏡型表示パネル３０８は、後述する記入用紙記入支援処理を実行している間、撮影部３０７により撮影された記入用紙Ｓの画像を表示し、ＰＣ２０から警告画像の表示指示が受信されると、記入用紙Ｓの画像に警告画像を重畳表示する。入力操作部３０９は、ユーザーからの操作指示を受け付ける。例えば、例えば、後述する警告画像表示処理を実行するプログラムの開始指示を受け付ける。
【００５４】
図１３は、ＰＣ２０が行う記入用紙記入支援処理の動作を示す図である。図３の上記の実施の形態の記入用紙記入支援処理の動作と同一の処理内容については、同一のステップ番号を付与して説明を省略し、以下、相違点を中心に説明する。
ＰＣ２０は、ステップＳ３１０において、表示フラグがオンの場合に（ステップＳ３１０：ＹＥＳ）、警告画像の非表示指示をＨＭＤ３０に送信して表示フラグをオフに設定する（ステップＳ１３０１）。
【００５５】
又、ＰＣ２０は、ステップＳ３１４において、表示フラグがオンの場合に（ステップＳ３１４：ＹＥＳ）、警告画像の非表示指示をＨＭＤ３０に送信し（ステップＳ１３０２）、ステップＳ３０３において特定した記入欄番号と警告画像の表示指示をＨＭＤ３０に送信する（ステップＳ１３０３）。
又、ＰＣ２０は、ステップＳ３１２において、全ての記入欄が記入済みである場合に（ステップＳ３１２：ＹＥＳ）、処理終了指示をＨＭＤ３０に送信する（ステップＳ１３０４）。
【００５６】
図１４は、ＨＭＤ３０が行う警告画像表示処理の動作を示すフローチャートである。ＨＭＤ３０は、ＰＣ２０から記入中記入欄の記入欄番号と警告画像の表示指示を受信すると（ステップＳ１４０１：ＹＥＳ）、眼鏡型表示パネル３０８に表示されている撮影画像における記入中記入欄の表示領域を特定する（ステップＳ１４０２）。
次にＨＭＤ３０は、特定した表示領域を注目領域と特定し、注目領域に基づいて眼鏡型表示パネル３０８において警告画像を表示すべき領域を決定し（ステップＳ１４０３）、警告画像を作成し、決定した領域に作成した警告画像を注目領域の少なくとも一部に重畳するように表示させる（ステップＳ１４０４）。
【００５７】
そして、ＨＭＤ３０は、ＰＣ２０から警告画像非表示指示を受信すると（ステップＳ１４０５:ＹＥＳ）、表示中の警告画像を非表示にし（ステップＳ１４０６）、ＰＣ２０から処理終了指示を受信したか否かを判定する（ステップＳ１４０７）。
処理終了指示を受信していない場合には（ステップＳ１４０７：ＮＯ）、ＨＭＤ３０は、ステップＳ１４０１の処理に移行し、処理終了指示を受信した場合には（ステップＳ１４０７：ＹＥＳ）、警告画像表示処理を終了する。
【００５８】
（３）又、変形例（２）の記入システムの構成において、圧力感知センサーの代わりに公知技術である電子ペンを用いてユーザーの記入用紙への記入位置を検出することとしてもよい。
具体的には、記入用紙として特許文献（特開２０１３−１４５５８６）の図３、図４に示されるドットパターンを印刷した記入用紙を用い、当該特許文献の図５及び段落００３６〜００４５に記載されている構成の電子ペンにより印刷されたドットパターンを撮影し、撮影したドットパターンの画像データから記入用紙への記入位置の座標データを演算して取得し、当該座標データを電子ペンに内蔵されている通信ユニットを介してＰＣ２０に送信して変形例（２）と同様の動作を行うこととしてもよい。
【００５９】
又、ＰＣ２０を用いず、通信ユニットから直接ＨＭＤ３０に座標データを送信する処理を行うこととし、ＨＭＤ３０で変形例（２）の記入用紙記入支援処理と同様の動作を実行するように記入システムを構成することとしてもよい。
（４）又、変形例（２）、（３）の記入システムにおいてＨＭＤ３０が視線センサーを備える構成とし、変形例（１）の場合と同様に眼鏡型表示パネル３０６において記入中のユーザーの視線が向いている領域を、視線センサーを用いて検出して当該領域を注目領域と特定することとしてもよい。具体的には、図１４のステップＳ１４０３の処理の代わりに図９のステップＳ９０１、ステップＳ９０２と同様の処理を行うこととしてもよい。本変形例の場合には、眼鏡型表示パネル３０６を透光型の表示パネルとし、ＨＭＤ３０において撮影部３０７の構成を省いた構成としてしてもよい。
【００６０】
（５）上記の実施の形態の記入用紙記入支援処理の動作を、図１５に示すように変形して警告画像の表示形態を変更することとしてもよい。同図において、上記の実施形態の図３の記入用紙記入支援処理と同一の処理内容については、同一のステップ番号を付与して説明を省略し、以下相違点について説明する。表示端末１０は、ステップＳ３１５又はステップＳ３１６の処理を実行した後に、記入状況テーブルを参照してＸより記入欄番号（順番）が上位の未記入欄の総数（Ｎ）をカウントし（ステップＳ１５０１）、Ｎが閾値以下か否かを判定する（ステップＳ１５０２）。
【００６１】
Ｎが閾値以下でない場合には（ステップＳ１５０２：ＮＯ）、ステップＳ３１３の処理において決定した領域に、記入欄番号Ｙ（Ｘより順番が上位でＸに順番が最も近い未記入の記入欄番号）の記入欄が未記入（記入漏れ）であることを示す警告画像（例えば、Ｙが５である場合、記入欄５）が記入漏れです。」というメッセージを示す警告画像）を、警告画像の元画像データ及びＸより順番が上位の未記入欄番号Ｙの情報に基づいて作成し、作成した警告画像を注目領域の少なくとも一部に重畳するように表示させる（ステップＳ１５０３）。
【００６２】
Ｎが閾値以下の場合には（ステップＳ１５０２：ＹＥＳ）、表示端末１０は、ステップＳ３１３の処理において決定した領域に、Ｘより順番が上位の未記入欄（記入漏れの記入欄）を全て示す警告画像（例えば、閾値が２の場合で、未記入欄の記入欄番号が５、６の場合、「記入欄５）と６）が記入漏れです。」というメッセージを示す警告画像）を、警告画像の元画像データ及びＸより順番が上位の未記入欄の情報に基づいて作成し、作成した警告画像を注目領域の少なくとも一部に重畳するように表示させる（ステップＳ１５０４）。
【００６３】
これにより、本変形例に係る記入用紙記入支援処理では、記入用紙への記入中において、記入中記入欄よりも順番が上位の記入欄が未記入であった場合に、未記入欄を特定する警告画像が、表示パネル１１０を通したユーザーの視界内において、ユーザーが注目している注目領域の少なくとも一部に重畳するように表示されるので、ユーザーは警告画像の表示に容易に気づくことができるとともに、迅速に未記入欄の位置を知ることができる。
【００６４】
なお、本変形例のステップＳ１５０１、ステップＳ１５０２、ステップＳ１５０４の処理をなくし、ステップＳ３１５又はステップ３１６の処理が実行された後、ステップＳ１５０３の処理を行うように、本変形例を変形することとしてもよい。
（６）又、上記の実施の形態の記入用紙記入支援処理の動作を、図１６に示すように変形して警告画像の表示形態を変更することとしてもよい。同図において、上記の実施形態の図３の記入用紙記入支援処理と同一の処理内容については、同一のステップ番号を付与して説明を省略し、以下相違点について説明する。
【００６５】
表示端末１０は、ステップＳ３０４の処理を実行した後、記入状況テーブルを参照してＸよりも記入欄番号（順番）が上位の未記入欄が有るか否かを判定し（ステップＳ１６０１）、有る場合には（ステップＳ１６０１：ＹＥＳ）、ステップＳ３０６〜ステップＳ３０８、ステップＳ３１３〜ステップＳ３１６の処理を実行した後、記入欄番号Ｙの記入欄が未記入（記入漏れ）であることを示す警告画像（例えば、Ｙが５である場合、記入欄５）が記入漏れです。」というメッセージを示す警告画像）を、警告画像の元画像データ及び未記入欄番号Ｙの情報に基づいて作成し、作成した警告画像を注目領域の少なくとも一部に重畳するように表示させる（ステップＳ１６０２）。
【００６６】
Ｘよりも順番が上位の未記入欄が無い場合には（ステップＳ１６０１：ＮＯ）、表示端末１０は、記入状況テーブルを参照してＸよりも順番が下位の未記入欄が有るか否かを判定し（ステップＳ１６０３）、有る場合には（ステップＳ１６０３：ＹＥＳ）、さらに、Ｘよりも順番が下位の記入欄が全て未記入欄であって、その未記入欄の数が２以上か否かを判定する（ステップＳ１６０４）。
【００６７】
ステップＳ１６０４の判定結果が否定的である場合には（ステップＳ１６０４：ＮＯ）、表示端末１０は、変数ＹをＸに設定した後（ステップＳ１６０５）、変数Ｙの値を１インクリメントし（ステップＳ１６０６）、記入状況テーブルにおいて、記入欄番号Ｙに対応する記入状況フラグを参照して記入欄番号Ｙの記入欄が未記入であるか否かを判定する（ステップＳ１６０７）。
【００６８】
記入欄番号Ｙの記入欄が未記入である場合には（ステップＳ１６０７：ＹＥＳ）、表示端末１０は、ステップＳ３１３の処理に移行し、記入欄番号Ｙの記入欄が未記入でない場合には（ステップＳ１６０７：ＮＯ）、ステップＳ１６０６の処理に移行する。
ステップＳ１６０４の判定結果が肯定的である場合には（ステップＳ１６０４：ＹＥＳ）、表示端末１０は、表示フラグがオンか否かを判定する（ステップＳ１６０８）。そして、表示フラグがオンの場合には（ステップＳ１６０８：ＹＥＳ）、表示端末１０は、表示パネル１１０に表示中の警告画像を非表示にして表示フラグをオフに設定し（ステップＳ１６０９）、表示フラグがオンでない場合には（ステップＳ１６０８：ＮＯ）、ステップＳ３０２の処理に移行する。
【００６９】
又、ステップＳ１６０３において、Ｘよりも順番が下位の未記入欄が無い場合には（ステップＳ１６０３：ＮＯ）、表示端末１０は、表示フラグがオンか否かを判定し（ステップＳ１６１０）、表示フラグがオンの場合には（ステップＳ１６１０：ＹＥＳ）、表示パネル１１０に表示中の警告画像を非表示にして表示フラグをオフに設定し（ステップＳ１６１１）、表示フラグがオンでない場合には（ステップＳ１６１０：ＮＯ）、処理を終了する。
【００７０】
図１７は、上記の記入処理支援処理による動作の具体例を示すテーブルである。同図の具体例は、記入用紙の記入欄が１番から１０番まで順序付けられ、各記入欄が図５に示すようなレイアウトで配置された場合の動作例を示す。同図の各符号は、図４のテーブルと同様であるので説明を省略する。
同図の具体例においては、記入欄番号が、１番、３番、５番、８番、２番、９番、４番、６番、１０番、７番の順に記入欄への記入がされたことを示している。
【００７１】
又、同図のテーブルの最下欄は、対応する時刻において、警告画像が示す未記入欄番号Ｙを示す欄であり、「数字」は、Ｙの番号を、「無」は、警告画像が表示されないことをそれぞれ示す。
時刻Ｔ１の時点においては、図１６の記入処理支援処理において記入欄番号が１番の記入欄への記入が検出され（ステップＳ３０２：ＹＥＳ）、Ｘ＝１となり、警告画像は表示されない（ステップＳ１６０１：ＮＯ、ステップＳ１６０３：ＹＥＳ、ステップＳ１６０４：ＹＥＳ、ステップＳ１６０８：ＮＯ）。
【００７２】
時刻Ｔ２の時点においては、図１６の記入処理支援処理において記入欄番号が３番の記入欄への記入が検出され（ステップＳ３０２：ＹＥＳ）、Ｘ＝３となり、記入中記入欄番号３より順番が上位の未記入欄（記入欄番号２の未記入欄）があるので（ステップ１６０１：ＹＥＳ）、Ｙ＝２となり、ステップ３１３において決定した領域に記入欄番号２の記入欄が記入漏れであることを示す警告画像が注目領域の少なくとも一部に重畳するように表示される（ステップＳ３１３、ステップＳ３１４：ＮＯ、ステップＳ３１５、ステップＳ１６０２）。
【００７３】
時刻Ｔ３の時点においては、図１６の記入処理支援処理において記入欄番号が５番の記入欄への記入が検出され（ステップＳ３０２：ＹＥＳ）、Ｘ＝５となり、記入中記入欄番号５より順番が上位の未記入欄（記入欄番号２と４の未記入欄）があるので（ステップ１６０１：ＹＥＳ）、Ｙは、Ｘ（記入欄番号５）に最も順番が近い４となり、ステップ３１３において決定した領域に記入欄番号４の記入欄が記入漏れであることを示す警告画像が注目領域の少なくとも一部に重畳するように表示される（ステップＳ３１３、ステップＳ３１４：ＹＥＳ、ステップＳ３１６、ステップＳ１６０２）。
【００７４】
時刻Ｔ４の時点においては、図１６の記入処理支援処理において記入欄番号が８番の記入欄への記入が検出され（ステップＳ３０２：ＹＥＳ）、Ｘ＝８となり、記入中記入欄番号８より順番が上位の未記入欄（記入欄番号２、４、６、７の未記入欄）があるので（ステップ１６０１：ＹＥＳ）、Ｙは、Ｘ（記入欄番号８）に最も順番が近い７となり、ステップ３１３において決定した領域に記入欄番号７の記入欄が記入漏れであることを示す警告画像が注目領域の少なくとも一部に重畳するように表示される（ステップＳ３１３、ステップＳ３１４：ＹＥＳ、ステップＳ３１６、ステップＳ１６０２）。
【００７５】
時刻Ｔ５の時点においては、図１６の記入処理支援処理において記入欄番号が２番の記入欄への記入が検出され（ステップＳ３０２：ＹＥＳ）、Ｘ＝２となる。そして、記入中記入欄番号２より順番が上位の未記入欄が無く、記入中記入欄番号２より順番が下位の未記入欄（記入欄番号４、６、７、９、１０の未記入欄）があるので（ステップＳ１６０１：ＮＯ、ステップＳ１６０３：ＹＥＳ、ステップＳ１６０４：ＮＯ）、Ｙは、Ｘ（記入欄番号２）に最も順番が近い４となり、ステップ３１３において決定した領域に記入欄番号４の記入欄が記入漏れであることを示す警告画像が注目領域の少なくとも一部に重畳するように表示される（ステップＳ３１３、ステップＳ３１４：ＹＥＳ、ステップＳ３１６、ステップＳ１６０２）。
【００７６】
時刻Ｔ６の時点においては、図１６の記入処理支援処理において記入欄番号が９番の記入欄への記入が検出され（ステップＳ３０２：ＹＥＳ）、Ｘ＝９となり、記入中記入欄番号９より順番が上位の未記入欄（記入欄番号４、６、７の未記入欄）があるので（ステップ１６０１：ＹＥＳ）、Ｙは、Ｘ（記入欄番号９）に最も順番が近い７となり、ステップ３１３において決定した領域に記入欄番号７の記入欄が記入漏れであることを示す警告画像が注目領域の少なくとも一部に重畳するように表示される（ステップＳ３１３、ステップＳ３１４：ＹＥＳ、ステップＳ３１６、ステップＳ１６０２）。
【００７７】
時刻Ｔ７の時点においては、図１６の記入処理支援処理において記入欄番号が４番の記入欄への記入が検出され（ステップＳ３０２：ＹＥＳ）、Ｘ＝４となる。そして、記入中記入欄番号４より順番が上位に未記入欄が無く、記入中記入欄番号４より順番が下位の未記入欄（記入欄番号６、７、１０の未記入欄）があるので（ステップＳ１６０１：ＮＯ、ステップＳ１６０３：ＹＥＳ、ステップＳ１６０４：ＮＯ）、Ｙは、Ｘ（記入欄番号４）に最も順番が近い６となり、ステップ３１３において決定した領域に記入欄番号６の記入欄が記入漏れであることを示す警告画像が注目領域の少なくとも一部に重畳するように表示される（ステップＳ３１３、ステップＳ３１４：ＹＥＳ、ステップＳ３１６、ステップＳ１６０２）。
【００７８】
時刻Ｔ８の時点においては、図１６の記入処理支援処理において記入欄番号が６番の記入欄への記入が検出され（ステップＳ３０２：ＹＥＳ）、Ｘ＝６となる。そして、記入中記入欄番号６より順番が上位の未記入欄が無く、記入中記入欄番号６より順番が下位の未記入欄（記入欄番号７、１０の未記入欄）があるので（ステップＳ１６０１：ＮＯ、ステップＳ１６０３：ＹＥＳ、ステップＳ１６０４：ＮＯ）、Ｙは、Ｘ（記入欄番号６）に最も順番が近い７となり、ステップ３１３において決定した領域に記入欄番号７の記入欄が記入漏れであることを示す警告画像が注目領域の少なくとも一部に重畳するように表示される（ステップＳ３１３、ステップＳ３１４：ＹＥＳ、ステップＳ３１６、ステップＳ１６０２）。
【００７９】
時刻Ｔ９の時点においては、図１６の記入処理支援処理において記入欄番号が１０番の記入欄への記入が検出され（ステップＳ３０２：ＹＥＳ）、Ｘ＝１０となり、記入中記入欄番号１０より順番が上位の未記入欄（記入欄番号７の未記入欄）があるので（ステップ１６０１：ＹＥＳ）、Ｙ＝７となり、ステップ３１３において決定した領域に記入欄番号７の記入欄が記入漏れであることを示す警告画像が注目領域の少なくとも一部に重畳するように表示される（ステップＳ３１３、ステップＳ３１４：ＹＥＳ、ステップＳ３１６、ステップＳ１６０２）。
【００８０】
時刻Ｔ１０の時点においては、図１６の記入処理支援処理において記入欄番号が７番の記入欄への記入が検出され（ステップＳ３０２：ＹＥＳ）、記入欄番号１〜１０の全ての記入欄が記入されたことになるので（ステップＳ１６０１：ＮＯ、ステップＳ１６０３：ＮＯ）、表示中の警告画像が非表示にされ、記入支援処理が終了する（ステップＳ１６１０：ＹＥＳ、ステップＳ１６１１）。
【００８１】
このように、本変形例においては、記入中記入欄よりも順番が下位の未記入欄がある場合においても、未記入欄を特定する警告画像が表示されるので、ユーザーが記入欄の順番に従わず、ランダムに記入した場合においても、警告画像でユーザーに記入漏れがあることを知らせることができ、記入漏れの発生を防止することができる。
又、図１８に示す図１７とは別の具体例のテーブルに示すように、記入欄への記入順が記入欄の順番に従っている場合には、警告画像は、未記入欄が１つになった場合を除いて表示されないので（ステップＳ１６０１：ＮＯ、ステップＳ１６０３：ＹＥＳ、ステップＳ１６０４：ＹＥＳ、ステップＳ１６０８：ＮＯ）、ユーザーが記入順に沿って記入している時に不必要に警告画像が過度に表示されないようにすることができる。
【００８２】
（７）上記の実施の形態では、記入中記入欄より記入欄番号が上位の記入欄に未記入の記入欄（記入漏れ）があることを示す警告画像）を作成して表示パネル１１０に表示させることとしたが、当該警告画像の代わりに記入中記入欄より記入欄番号が上位の未記入欄の総数を示す警告画像を作成して表示パネル１１０に表示させることとしてもよい。変形例（１）〜（３）についても同様に、本変形例の警告画像を表示させることとしてもよい。
【００８３】
（８）上記の実施の形態及び変形例（１）〜（３）では、記入中記入欄より順番が上位の記入欄に未記入の記入欄が有る場合に、警告画像を表示パネルに表示させることとしたが、
記入中記入欄より順番が上位、下位にかかわらず未記入欄がある場合には警告画像を表示パネルに表示させることとしてもよい。
【産業上の利用可能性】
【００８４】
本発明は、記入用紙の記入欄への記入を支援する技術に関し、特に記入欄への記入漏れを防ぐ技術として利用できる。
【符号の説明】
【００８５】
１、１Ａ、１Ｂ          記入システム
２                      載置台
３                      支持部材
１０、１０Ａ            表示端末
２０                    ＰＣ
３０                    ＨＭＤ
４０                    圧力感知センサー
１００                  ＣＰＵ
１０１                  無線通信部
１０２                  ＲＯＭ
１０３                  ＲＡＭ
１０４                  記入位置検出部
１０５                  記入状況管理部
１０６                  警告画像作成部
１０７                  表示制御部
１０８                  記入用紙情報記憶部
１０９                  撮影部
１１０                  表示パネル
【図１】
0006488704.tif 000002
【図２】
0006488704.tif 000003
【図３】
0006488704.tif 000004
【図４】
0006488704.tif 000005
【図５】
0006488704.tif 000006
【図６】
0006488704.tif 000007
【図７】
0006488704.tif 000008
【図８】
0006488704.tif 000009
【図９】
0006488704.tif 000010
【図１０】
0006488704.tif 000011
【図１１】
0006488704.tif 000012
【図１２】
0006488704.tif 000013
【図１３】
0006488704.tif 000014
【図１４】
0006488704.tif 000015
【図１５】
0006488704.tif 000016
【図１６】
0006488704.tif 000017
【図１７】
0006488704.tif 000018
【図１８】
0006488704.tif 000019