(57)【要約】【課題】  帳票における紙面上の位置を手書きされた情報と結びつけて効率よくデータ化する。【解決手段】  第１のフォームＦの始点領域（３２）において認識された手書きの引出線（ＴS1）を追跡することにより、画像（３１）上に手書きされた目印（ＸS1）を検出する。この検出された目印（ＸS1）の画像（３１）上の位置情報を認識し、認識された位置情報を、始点領域（３２）の認識記号（ＡS1）と一致する第２フォームＨの記号領域（４０ａ）の始点記号（「ａ」）に対応する筆記領域（４０ｂ）に筆記された情報（「外傷」）に関連づける。これにより、認識された目印で示される患部位置と症状が結びつけられた電子化データが得られるようになる。【選択図】  図３
2007179340.tif 000002
【特許請求の範囲】
【請求項１】
所定の画像が印刷されていると共に、始点を識別するそれぞれの認識記号が印刷されている複数の始点領域を備える第１のフォームと、前記認識記号に対応する始点記号がそれぞれ印刷された記号領域と、該始点記号毎に設けられている筆記領域とを備える第２のフォームとを備える帳票であって、
前記第１のフォームにおいて、前記画像上に所定の目印を手書きすると共に、手書きした目印毎に１つの前記始点領域とを繋ぐ引出線を手書きし、前記第２のフォームにおいて前記始点記号毎に設けられた前記筆記領域に手書きで情報を筆記した帳票をイメージデータに変換して処理することにより、前記始点領域において認識された前記引出線を追跡して終端に検出した目印における前記画像上の位置情報を認識し、当該位置情報を、当該始点領域の前記認識記号と一致する前記始点記号に設けられた前記筆記領域に筆記されている前記情報に関連づけるようにしたことを特徴とする帳票。
【請求項２】
前記画像が輪郭あるいは概形の画像とされ、前記目印により特別な箇所の位置が指定されていると共に、前記筆記領域に前記目印で指定した特別な箇所に対応する情報が筆記されていることを特徴とする請求項１記載の帳票。
【請求項３】
前記引出線を追跡することにより検出した前記目印における前記第１のフォームに対する相対座標を、前記画像における座標に変換することにより、前記目印の前記画像上の位置情報を取得するようにしたことを特徴とする請求項１記載の帳票。
【請求項４】
所定の画像が印刷されていると共に、始点を識別するそれぞれの認識記号が印刷されている複数の始点領域を備える第１のフォームと、前記認識記号に対応する始点記号がそれぞれ印刷された記号領域と、該始点記号毎に設けられている筆記領域とを備える第２のフォームとを備える帳票をイメージデータに変換することのできる変換手段と、
該変換手段により変換されたイメージデータを処理する処理手段とを備え、
前記処理手段は、
前記第１のフォームにおいて、前記始点領域において認識された手書きの引出線を追跡することにより前記画像上に手書きされた所定の目印を検出する目印検出手段と、
該目印検出手段で検出された前記目印の前記画像上の位置情報を認識する位置情報認識手段と、
該位置情報認識手段で認識された当該位置情報を、当該始点領域の前記認識記号と一致する前記始点記号に設けられた前記筆記領域に筆記されている情報に関連づける関連づけ手段と、
を備えるようにしたことを特徴とする帳票処理装置。
【請求項５】
前記画像が輪郭あるいは概形の画像とされ、前記目印により特別な箇所の位置が指定されていると共に、前記筆記領域に前記目印で指定した特別な箇所に対応する情報が筆記されていることを特徴とする請求項４記載の帳票処理装置。
【請求項６】
前記引出線を追跡することにより検出した前記目印における前記第１のフォームに対する相対座標を、前記画像における座標に変換することにより、前記目印の前記画像上の位置情報を取得するようにしたことを特徴とする請求項４記載の帳票処理装置。
【請求項７】
所定の画像が印刷されていると共に、始点を識別するそれぞれの認識記号が印刷されている複数の始点領域を備える第１のフォームと、前記認識記号に対応する始点記号がそれぞれ印刷された記号領域と、該始点記号毎に設けられている筆記領域とを備える第２のフォームとを備える帳票をイメージデータに変換することのできる変換手段を備えるコンピュータを、
該変換手段により変換されたイメージデータを処理する処理手段として機能させる帳票処理プログラムであって、
前記処理手段は、
前記第１のフォームにおいて、前記始点領域において認識された手書きの引出線を追跡することにより前記画像上に手書きされた所定の目印を検出する目印検出手段、
該目印検出手段で検出された前記目印の前記画像上の位置情報を認識する位置情報認識手段、
該位置情報認識手段で認識された当該位置情報を、当該始点領域の前記認識記号と一致する前記始点記号に設けられた前記筆記領域に筆記されている情報に関連づける関連づけ手段、
として機能するようにしたことを特徴とする帳票処理プログラム。
【請求項８】
前記画像が輪郭あるいは概形の画像とされ、前記目印により特別な箇所の位置が指定されていると共に、前記筆記領域に前記目印で指定した特別な箇所に対応する情報が筆記されていることを特徴とする請求項７記載の帳票処理プログラム。
【請求項９】
前記引出線を追跡することにより検出した前記目印における前記第１のフォームに対する相対座標を、前記画像における座標に変換することにより、前記目印の前記画像上の位置情報を取得するようにしたことを特徴とする請求項７記載の帳票処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、紙面に手書きした位置情報を認識することのできる帳票並びに帳票処理装置および帳票処理プログラムに関するものである。
【背景技術】
【０００２】
カルテのようなものでは、カルテ上に人の形を描いた画像上を手書き線と目印で指示することにより患部および病名・症状を示すことが行われている。この場合、医師がカルテに記入した画像上の位置で示される患部と、手書きされた病名・症状とを電子化してデータ化することができれば既往症(過去にその部分が痛んだ)などの位置や病名・症状による検索を可能とすることができる。
【発明の開示】
【発明が解決しようとする課題】
【０００３】
そこで、医師がカルテに記入した画像上の位置で示される患部と、手書きされた病名・症状を電子化してデータ化する方法を考えてみる。
図１４に、カルテ等の帳票１００に印刷された輪郭とされた人型１０１を描いた紙面を示す。帳票１００には輪郭とされた人型１０１が印刷されており、人型１０１上に目印を記入することによりその指定位置が患部であることが示される。また、人型１０１上に記入した目印から引出線を手書きして、引出線の端部近傍に病名・症状を記入すれば、患部の病名・症状を認識することができる。図１５に、帳票１００において人型１０１上に目印を記入すると共に、この記入した目印から引出線を手書きして、引出線の端部近傍に症状を記入した例を示す。
【０００４】
図１５に示す例では、人型１０１の肩付近に×印の目印ＸS1が手書きされ、右腕に×印の目印ＸS2が手書きされている。さらに、人型１０１の右足の付け根に×印の目印ＸS3が手書きされ、左太ももに×印の目印ＸS4が手書きされている。そして、目印ＸS1から引出線ＴS1が手書きされてその端に「外傷」と症状ＭS1が手書きされ、目印ＸS2から引出線ＴS2が手書きされてその端が上記手書きされた「外傷」の症状ＭS1に繋がれている。また、目印ＸS3から引出線ＴS3が手書きされてその端に「骨折」と症状ＭS2が手書きされ、目印ＸS4から引出線ＴS4が手書きされてその端に「切り傷」と症状ＭS3が手書きされている。
【０００５】
このような帳票１００において、画像上の位置で示される患部と、手書きされた症状を認識するために帳票１００をスキャナ等によりイメージデータに変換する。次いで、手書きされた引出線の始点を認識し、認識された引出線の線追跡を行うことにより目印を検出し、人型１０１の画像における目印の座標から患部位置を認識すればよい。しかしながら、図１５に示す例のように引出線ＴS1と引出線ＴS2は始点がほぼ重なるように手書きされていると、始点を明確に検出することができないようになる。また、図１５に示す例のように「骨折」の症状ＭS2と「切り傷」の症状ＭS3とが並べて手書きされていると、症状が「骨折」と「切り傷」とで別とされているのか、「骨折」＋「切り傷」なのか判別することができないことになる。さらに、図１５に示すように人型１０１にノイズＮがあると、ノイズＮが目印なのかノイズなのか判別できないことになる。
【０００６】
このように、帳票１００上に目印を書くだけでは、ノイズなどの原因によって正確に位置を指定することや、そもそも目印を書いたのかどうかさえ明確ではないという問題点があった。また、帳票１００上に手書きで書かれた引出線で特定の画像の位置を指示することにより、手書きされた症状と結びつけるよう効率よく電子化することができないという問題点があった。
そこで、本発明は、帳票における紙面上に指定された位置と手書きされた情報とを結びつけて効率よくデータ化することのできる帳票並びに帳票処理装置および帳票処理プログラムを提供することを目的としている。
【課題を解決するための手段】
【０００７】
前記目的を達成するために、本発明は、所定の画像が印刷されていると共に、始点を識別するそれぞれの認識記号が印刷されている複数の始点領域を備える第１のフォームと、認識記号に対応する始点記号がそれぞれ印刷された記号領域と、該始点記号毎に設けられている筆記領域とを備える第２のフォームとを備える帳票とされていることを最も主要な特徴としている。
【発明の効果】
【０００８】
本発明によれば、所定の画像が印刷されていると共に、始点を識別するそれぞれの認識記号が印刷されている複数の始点領域を備える第１のフォームと、認識記号に対応する始点記号がそれぞれ印刷された記号領域と、該始点記号毎に設けられている筆記領域とを備える第２のフォームとを備える帳票とされている。これにより、第１のフォームにおいて、画像上に目印を手書きすると共に、手書きした目印毎に１つの始点領域とを繋ぐ引出線を手書きし、第２のフォームにおいて筆記領域に手書きで情報を筆記した帳票をイメージデータに変換して処理することにより、始点領域において認識された引出線を追跡して検出した目印の画像上の位置情報を認識し、この位置情報と、該当する始点領域の認識記号と一致する始点記号に設けられた筆記領域に筆記された前記情報とを関連づけることにより、帳票における紙面上に指定された位置と手書きされた情報とを結びつけて効率よくデータ化することができるようになる。
【発明を実施するための最良の形態】
【０００９】
本発明の実施例の帳票処理プログラムを備える帳票処理装置のハードウェア構成の一例を示すブロック図を図１に示す。
図１に示す本発明にかかる帳票処理装置１において、ＣＰＵ１０は、帳票処理装置１の全体の動作を制御する中央処理装置（Central Processing Unit）である。ＲＯＭ１１は、ＣＰＵ１０が実行する本発明の帳票処理に関するプログラム等の動作プログラムや、帳票データ等の各種データが格納されているＲＯＭ（Read Only Memory）であり、ＲＡＭ１２は、ＲＯＭ１１や記憶装置１３等から読み出された帳票データ等の各種データを一時的に格納する格納エリアや、ＣＰＵ１０のワークエリア等が設定されるＲＡＭ（Random Access Memory）である。記憶装置１３は、帳票処理に関連するプログラム等の各種アプリケーションプログラムや本発明にかかる帳票の帳票データが記憶される大容量の記憶手段であり、ＨＤＤ（Hard Disk Drive）、ＦＤＤ（Floppy（登録商標）Disk Drive）、ＣＤ（Compact Disk）−ＲＯＭ、ＭＯ（Magneto Optical Disk）、ＤＶＤ（Digital Versatile Disk）等により構成することができる。
【００１０】
Ｉ／Ｆ１４は、外部に設けられているスキャナやプリンタ等の周辺機器１５との間でデータの受け渡しを行うインターフェースであり、周辺機器１５は、紙媒体とされる帳票をイメージデータに変換するスキャナや帳票を印刷するプリンタ等とされる。通信インターフェース１６は、イーサネット（登録商標）等のＬＡＮ（Local Area Network）やインターネット、電話回線等の通信ネットワーク１７を介してサーバコンピュータ１８に接続するための通信インターフェースであり、通信ネットワーク１７を通じてサーバコンピュータ１８から本発明に係る帳票処理に関連するアプリケーションソフトや帳票データ等の各種データを受け取ることができる。
操作子２０は、キーボードやポインティングデバイス等の操作子であり、操作子２０を操作した際の操作子情報は検出回路１９により検出されてバス２３へ送出される。ディスプレイ２２は、帳票の編集や設定を行う画面が表示される液晶表示器等の表示装置であり、ディスプレイ２２は表示回路２１により駆動されて所望の画面が表示される。
【００１１】
前記した帳票処理装置１のハードウェア構成は、パーソナルコンピュータやワークステーションと同様の構成とされており、パーソナルコンピュータやワークステーションに本発明にかかる帳票処理プログラムを実行させることにより、本発明にかかる帳票処理装置１とすることができる。
次に、本発明に係る帳票処理装置１で処理される本発明にかかる帳票の実施例を図２に示す。
図２に示す帳票２は紙媒体に印刷された状態の帳票２であり、帳票２の四隅にはそれぞれ基準点マーク５が印刷されている。基準点マーク５は、後述するあらかじめ配置位置が定められているフォームや画像の相対位置を特定するためのマークとされる。帳票２は、第１フォームＦと第２フォームＨとを有している。図２に示す例では第２フォームＨは第１フォームＦの右側に配置されているが、上側、下側あるいは左側の空いている領域に配置するようにしても良い。
【００１２】
第１フォームＦには、ほぼ中央に位置する矩形の領域内に輪郭とされた人型が描かれた画像３１が印刷されている。第１フォームＦの四隅は始点領域３２，３３，３４，３５とされて、それぞれの始点領域３２〜３５の領域内に始点領域３２〜３５をそれぞれ特定するための認識記号がそれぞれ筆記されている。図２に示す例では、始点領域３２に「ａ」の認識記号ＡS1が筆記され、始点領域３３に「ｂ」の認識記号ＡS2が筆記され、始点領域３４に「ｃ」の認識記号ＡS3が筆記され、始点領域３５に「ｄ」の認識記号ＡS4が筆記されている。第２フォームＨは、表形式とされており記号領域４０ａと筆記領域４０ｂとを備えている。記号領域４０ａと筆記領域４０ｂの行数は、第１フォームＦの始点領域３２〜３５の数と同数とされ、図２に示す例では４行とされている。４行の記号領域４０ａには、第１フォームＦに筆記されている認識記号と同じ記号の始点記号とされる「ａ」「ｂ」「ｃ」「ｄ」がそれぞれ筆記されている。４行の筆記領域４０ｂは、始点記号に対応する患部の症状が手書きされる領域とされている。
【００１３】
このように構成されている帳票２は、帳票処理装置１において作成されている。帳票２を新規に作成する際には、帳票処理装置１において帳票を作成するための画像や表および文字を入力する機能を備えるワードプロセッサ等のアプリケーションプログラムを起動させる。これにより、ディスプレイ２２上に帳票２の外縁を示す枠が表示される。この枠は帳票２が印刷された際の紙媒体の大きさを示している。次いで、操作子２０を操作することにより第１フォームＦを帳票２上の所定位置に作成する。次に、第１フォームＦ内に画像３１を貼り付ける。そして、画像３１の周囲とされる第１フォームＦの四隅に始点領域３２，３３，３４，３５を設置し、設置した始点領域３２〜３５のそれぞれの領域内に始点領域３２〜３５をそれぞれ特定するための認識記号を設置する。この場合、始点領域３２に「ａ」の認識記号ＡS1が筆記され、始点領域３３に「ｂ」の認識記号ＡS2が筆記され、始点領域３４に「ｃ」の認識記号ＡS3が筆記され、始点領域３５に「ｄ」の認識記号ＡS4がそれぞれ筆記される。
【００１４】
さらに、帳票２の空き領域に第２フォームＨを設置する。第２フォームＨは、表形式とされており記号領域４０ａと筆記領域４０ｂとを備え、記号領域４０ａと筆記領域４０ｂの行数は、第１フォームＦの始点領域３２〜３５の数と同数とされる。４行の記号領域４０ａには、第１フォームＦに筆記されている認識記号と同じ記号の始点記号とされる「ａ」「ｂ」「ｃ」「ｄ」がそれぞれ筆記される。次いで、帳票２の四隅に基準点となる基準点マーク５を設置し、基準点マーク５から決定される基準点に対する第１フォームＦおよび画像３１、第２フォームＨの相対座標を取得する。この相対座標は、例えば第１フォームＦおよび画像３１、第２フォームＨにおける左上の隅の相対座標とされる。これにより、帳票２は作成され周辺機器１５におけるプリンタにより印刷されて、図２に示すような帳票２が作成されるようになる。
【００１５】
このようにして作成された帳票２の帳票データは記憶装置１３に記憶することができることから、次回に帳票２を使用したい場合には記憶装置１３に記憶されている帳票データの中から帳票２の帳票データを選択してディスプレイ２２上に表示させて印刷することにより、帳票２を得ることができる。なお、予め複数種類の代表的な帳票データをＲＯＭ１１や記憶装置１３に記憶しておき、記憶している帳票データの中から使用したい帳票の帳票データを選択してディスプレイ２２上に表示させて印刷することができるようにしても良い。
【００１６】
次に、このように構成されている実施例の帳票２において、患部の症状を取得してデータ化する帳票処理の説明を行う。
図３に示すように、印刷された帳票２の第１フォームＦ内に印刷されている輪郭とされた人型の画像３１の患部位置にそれぞれ目印を記入する。図３に示す例では、人型の画像３１の肩付近に×印の目印ＸS1が手書きされ、右腕に×印の目印ＸS2が手書きされている。さらに、人型の画像３１の右足の付け根に×印の目印ＸS3が手書きされ、左太ももに×印の目印ＸS4が手書きされている。目印の形状は予め定められた形状としておくのが好適とされ、図３に示す例では目印が×印とされている。そして、目印ＸS1から引出線ＴS1が始点領域３２内まで手書きされ、目印ＸS2から引出線ＴS2が始点領域３３内まで手書きされている。また、目印ＸS3から引出線ＴS3が始点領域３４内まで手書きされ、目印ＸS4から引出線ＴS4が始点領域３５内まで手書きされている。さらに、第２フォームＨにおいて、記号領域４０ａにおける始点記号「ａ」に設けられた筆記領域４０ｂに「外傷」と症状が手書きされ、記号領域４０ａにおける始点記号「ｂ」に設けられた筆記領域４０ｂに「外傷」と症状が手書きされる。さらにまた、記号領域４０ａにおける始点記号「ｃ」に設けられた筆記領域４０ｂに「切り傷」と症状が手書きされ、記号領域４０ａにおける始点記号「ｄ」に設けられた筆記領域４０ｂに「骨折」と症状が手書きされる。
【００１７】
このように、第１フォームＦにおける人型の画像３１上の患部を示す位置に目印ＸS1〜ＸS4を手書きすると共に、目印ＸS1〜ＸS4のそれぞれから引出線ＴS1〜ＴS4を引き出して、それぞれ異なる始点領域３２〜３５まで手書きした帳票２を、帳票処理装置１の周辺機器１５とされるスキャナによりイメージデータに変換して帳票処理装置１に取り込む。この際に、帳票処理装置１においては帳票処理プログラムが起動されており、帳票２のイメージデータが取り込まれると、帳票処理装置１において帳票２の帳票処理が行われる。
帳票処理では、まず取り込まれたイメージデータから基準点マーク５を画像認識し、認識された複数の基準点マーク５から基準点が決定され、この基準点からの相対座標を用いて第２フォームＨの領域をイメージデータから切り出す。切り出された第２フォームＨの領域のイメージデータを文字認識することにより、記号領域４０ａの始点記号を認識すると共に、始点記号毎に設けられた筆記領域４０ｂに手書きされている症状を文字認識する。
【００１８】
次いで、基準点からの相対座標を用いて第１フォームＦにおける始点領域の一つをイメージデータから切り出す。切り出された始点領域の近辺に引出線の筆記があるか認識され、引出線があると認識された場合は、その引出線の端点を基点として始点領域から線追跡を行う。線追跡を行うことにより、引出線が繋がれている目印が認識されると、その目印の位置を患部を示す位置として認識された目印の基準点からの相対座標を取得する。次いで、取得した目印の相対座標を第１フォームＦに貼り付けられている画像３１上の座標に変換する。この変換は、図４（ａ）に示すように、帳票２の第１フォームＦから画像３１の領域を切り出して、図４（ｂ）に示す画像３１を取得する。そして、図４（ｂ）に示す画像３１上に筆記されている目印の座標を画像３１における座標に変換する。この変換された座標から、目印で示される画像３１上で指定された患部位置を認識することができる。次いで、認識された目印と引出線で繋がれている始点領域に筆記されている認識記号と一致する、第２フォームＨの記号領域４０ａの始点記号に設けられた筆記領域４０ｂに筆記された症状と、認識された目印とを関連づける。これにより、認識された目印で示される患部位置と症状が結びつけられた電子化データが得られるようになる。なお、画像３１上に図３に示すようにノイズＮがあっても、予め定められた目印の形状と異なると共に、引出線には繋がれていないため目印として認識されることはなく、本発明にかかる帳票２がノイズＮの影響を受けることを極力防止することができる。
【００１９】
例を挙げて具体的に説明すると、例えば図３における始点領域３２をイメージデータから切り出す。切り出された始点領域３２の近辺には引出線ＴS1があると認識され、認識された引出線ＴS1の端点を基点として線追跡を行う。線追跡を行うことにより、引出線ＴS1が繋がれている目印ＸS1が認識され、その目印ＸS1の位置を患部を示す位置として目印ＸS1の基準点からの相対座標を取得する。次いで、取得した目印ＸS1の相対座標を画像３１上の座標に変換する。この変換は前述したように図４（ａ）（ｂ）に示すように行われ、この変換された座標から、目印ＸS1で示される画像３１上で指定された患部位置が肩と認識されるようになる。そして、目印ＸS1と引出線ＴS1で繋がれている始点領域３２に筆記されている認識記号「ａ」と一致する、第２フォームＨの記号領域４０ａの始点記号「ａ」に設けられた筆記領域４０ｂに筆記された症状「外傷」と、認識された目印ＸS1とを関連づける。これにより、目印ＸS1で示される肩の患部位置に症状である「外傷」が結びつけられた電子化データが得られる。
【００２０】
なお、始点領域３２の近辺に引出線が認識されない場合は、引出線がない旨の警告をディスプレイ２２に表示し、引出線を線追跡しても目印が認識されない場合は、患部の位置指定が不明確である旨の警告をディスプレイ２２に表示する。また、引出線を線追跡して認識された目印に対応する第２フォームＨにおける筆記領域４０ｂ内の筆記を認識できない場合は、目印で示される患部の症状が筆記されていない旨の警告をディスプレイ２２に表示する。さらに、始点領域３２の近辺に引出線が認識されず、第２フォームＨにおける筆記領域４０ｂ内に筆記がある場合は、位置指定のない症状の筆記がある旨の警告をディスプレイ２２に表示し、この場合に筆記領域４０ｂ内の筆記を認識できない場合は、始点記号について何らの指定もなされていない旨の警告をディスプレイ２２に表示する。これにより、帳票処理装置１で実行される帳票２における帳票処理が終了する。
【００２１】
以上説明したように、本発明にかかる帳票２の第１フォームＦの画像上に患部位置を示す目印を手書きすると共に、この目印といずれかの始点領域とを繋ぐ引出線を手書きする。そして、本発明にかかる帳票処理装置１において帳票２をイメージデータに変換して帳票処理を行うことにより、始点領域から延伸する引出線で繋がれている目印が検出され、検出された目印の座標から目印で指定された患部位置を認識することができ、第２フォームＨの筆記領域４０ｂに筆記された文字を文字認識して、第２フォームＨの記号領域４０ａのうちの始点領域の認識記号と一致する始点記号に対応する文字認識された症状が、認識された患部位置の症状として関連づけされるようになる。これにより、目印で示される患部位置と症状が結びつけられた電子化データが得られるようになる。
【００２２】
次に、本発明にかかる帳票処理装置１において実行される帳票処理のフローチャートを図５および図６に示す。
図５および図６に示す帳票処理は、帳票２の画像データをスキャナにより取り込む際に開始される。この場合、帳票２の第１フォームＦの画像３１上に患部位置を示す例えば×印の目印が手書きされていると共に、この目印といずれかの始点領域とを繋ぐ引出線が手書きされている。また、帳票２の第２フォームＨの始点記号毎に設けられた筆記領域４０ｂに症状が手書きされている。そこで、ステップＳ１０にて帳票２をスキャナで読み取ることによりイメージデータに変換する。変換されたイメージデータからステップＳ１１にて基準点マーク５を画像認識し、ステップＳ１２にて認識された複数の基準点マーク５から基準点を決定して、基準点からの相対座標を用いて第２フォームＨの領域の画像を抽出する。この場合、第２フォームＨの基準点からの相対座標は予め定められていることから、ステップＳ１２では予め定められた相対座標の近傍から第２フォームＨの画像を抽出することができる。
【００２３】
次いで、ステップＳ１３にて抽出された第２フォームＨの画像を画像認識することにより、記号領域４０ａに筆記されている始点記号と対応する筆記領域４０ｂに手書きされている文字を文字認識して症状Ｍｓが取得される。そして、ステップＳ１４にて基準点からの相対座標を用いて始点領域を一つ抽出し、抽出された始点領域の近辺に何らかの筆記（引出線）があるか否かがステップＳ１５にて判定される。ここで、引出線の筆記がないと判定された場合はステップＳ１８に分岐し第２フォームＨの筆記領域４０ｂに手書きされた筆記を画像認識できたか否かが判定される。ここで、ステップＳ１３において画像認識できている場合はステップＳ１９に進み患部を示す位置指定のない筆記である旨の警告がディスプレイ２２に表示される。また、ステップＳ１３において画像認識できておらず筆記領域４０ｂ内の筆記を画像認識できていないとステップＳ１８で判定された場合はステップＳ２０に分岐して、第２フォームＨにおける記号領域４０ａに筆記されている記号に関して何も指定されていないとされ、その旨がディスプレイ２２に表示される。ステップＳ１９あるいはステップＳ２０の処理が終了すると、帳票処理は終了する。
【００２４】
ステップＳ１５にて抽出された始点領域の近辺に引出線の筆記があると判定された場合は、ステップＳ１６に進み筆記された引出線の始点領域における端点が認識されて、当該端点が線追跡の基点とされる。次いで、ステップＳ１７にて基点からの線追跡処理が行われる。ステップＳ１７における線追跡処理が終了すると、図６に示すフローチャートのステップＳ２１に進み、線追跡処理を行った結果、引出線の終端点を認識できたか判定される。ここで、線追跡処理を行っても終端点を認識できなかった場合は、ステップＳ２２に進んで患部を示す位置指定が不明確である旨の警告がディスプレイ２２に表示され、帳票処理は終了する。また、ステップＳ２１にて線追跡処理を行うことで終端点を認識できたと判定された場合は、ステップＳ２３に進み第２フォームＨの筆記領域４０ｂに手書きされている文字を文字認識して症状Ｍｓを取得することができたか判定される。ここで、症状ＭｓをステップＳ１３の処理で取得できた場合はステップＳ２５に進み、症状ＭｓをステップＳ１３の処理で取得できなかった場合は、ステップＳ２４に分岐する。
【００２５】
ステップＳ２４では、症状ＭｓをステップＳ１３の処理で取得できなかったことから、目印により患部の位置指定はされているが、症状Ｍｓの筆記がない旨の警告がディスプレイ２２に表示され、帳票処理は終了する。また、ステップＳ２５では線追跡された引出線の終端点に目印があることから、この終端点を患部を指定する指定位置Ｃｓ’とする。次いで、ステップＳ２６に進み基準点からの指定位置Ｃｓ’の相対座標を取得する。これにより、帳票２の紙面上における指定位置Ｃｓ’の相対座標が取得される。次いで、第１フォームＦの画像３１上における指定位置の座標を取得するために、図４（ａ）（ｂ）に示すように第１フォームの相対座標を画像Ｉの座標Ｃｓに変換する。ここでいう画像Ｉとは図２に示す画像３１を意味している。そして、ステップＳ２８にて、ステップＳ１４で抽出された始点領域の認識記号Ａｓに対応する患部を示す位置指定座標をＣｓとする。さらに、当該認識記号Ａｓに対応する筆記領域４０ｂに手書きされているステップＳ１３で文字認識された症状Ｍｓと、患部を示す位置指定座標ＣｓとをステップＳ２９にて関連づける。これにより、帳票２の第１フォームＦの画像３１上において例えば×印の目印により指定された患部の位置と、その症状が結びつけられた電子化データを得ることができるようになる。ステップＳ２９の処理が終了すると、帳票処理は終了する。
【００２６】
次に、帳票処理のステップＳ１７において実行される線追跡処理のフローチャートを図７に示す。
図７に示す線追跡処理が開始されると、ステップＳ３０にて基点を追跡した線Ｌの構成要素として記録し、ステップＳ３１にて基点近傍の黒画素領域ｘが線状か否かが判定される。この判定は、黒画素領域ｘにおける太さ、連結性および交差のチェックを行うことにより判定される。ここで、基点近傍の黒画素領域ｘが線状と判定された場合はステップＳ３２に分岐して線状と判定された黒画素領域ｘを基点として、ステップＳ３０に戻る。これにより、線状と判定された黒画素領域ｘが線Ｌの構成要素として記録されるようになり、基点近傍の黒画素領域ｘが線状と判定され続けることにより、線Ｌが黒画素領域ｘずつ延長されて線追跡を行えるようになる。
【００２７】
また、ステップＳ３１にて基点近傍の黒画素領域ｘが線状でないと判定された場合は、ステップＳ３３に進んで画像認識により現在の基点付近に終端の目印があるか否かが判定される。ここで、終端の目印があると判定された場合は、ステップＳ４３に分岐して追跡を成功終了し、検出された終端の目印を終端点位置とする。また、現在の基点付近に終端の目印がないとステップＳ３３にて判定された場合は、ステップＳ３４に進んで基点近傍の交差部を除く線分の始点群を認識する。さらに、ステップＳ３５にて認識された始点群の各始点に続く線分と線Ｌとの間を両端点の傾きを考慮したスプライン曲線で補完する。この様子を図８を参照しながら説明すると、図８（ａ）に示すように交差部Ｔがある場合はステップＳ３１にて基点近傍の黒画素領域ｘが線状でないと判定され、さらに、ステップＳ３３にて現在の基点付近に終端がないと判定される。そこで、図８（ｂ）に示すように基点近傍の交差部Ｔを除く始点群Ｕが認識される。図示する例では、始点ｕ１，ｕ２，ｕ３の３つの始点からなる始点群Ｕが認識される。次いで、拡大して示す図８（ｃ）に示すように線Ｌと各始点ｕ１，ｕ２，ｕ３とがスプライン曲線Ｖにより補完される。図示する場合は、線Ｌと始点ｕ１がスプライン曲線ｖ１で補完され、線Ｌと始点ｕ２がスプライン曲線ｖ２で補完され、線Ｌと始点ｕ３がスプライン曲線ｖ３で補完される。これにより、線Ｌと各始点ｕ１，ｕ２，ｕ３とが滑らかに繋がれるようになる。
【００２８】
ステップＳ３５の処理が終了すると、ステップＳ３６に進み始点が一つでも残っているか否かが判定される。最初のステップＳ３６の処理では少なくとも１つの始点があることからＹＥＳと判定されてステップＳ３７に進む。ステップＳ３７では、図８（ｃ）に示すように補完された全ての曲線の曲率二乗線積分を行い、そのうちの最も小さい始点を取り出す。図８（ｃ）に示す例ではスプライン曲線ｃ１で補完される始点ｕ１が取り出される。次いで、ステップＳ３８にて取り出した始点を基点とし、ステップＳ３９にてステップＳ３０以降の線を追跡する処理が行われる。これにより、例えば、始点ｕ１までが線Ｌの構成要素として記録され、始点ｕ１から上述した線を追跡する処理を行うことにより終端の目印の検出が行われるようになる。そこで、この処理において、基点近傍の黒画素領域ｘが線状でないと判定された際に、現在の基点付近に終端の目印があると判定された場合、および、現在の基点付近に終端の目印がなく、交差部もないと判定された場合はステップＳ３９からステップＳ４０に進む。そして、現在の基点付近に終端の目印があると判定された場合は、ステップＳ４０にて追跡が成功したと判定されて、ステップＳ４１に進みその終端の目印が追跡終了位置とされる。
【００２９】
また、現在の基点付近に終端の目印がなく、交差部もないと判定された場合は、ステップＳ４０にて追跡が成功していないと判定されてステップＳ３６に戻り、ステップＳ３６以降の処理が繰り返し行われる。この繰り返し処理では、次に曲率二乗線積分が小さい始点（例えば、始点ｕ３）が取り出されて始点ｕ３から上述した線を追跡する処理を行うことにより終端点の検出が行われるようになる。この繰り返し処理においても、ステップＳ４０にて追跡が成功していないと判定された場合は、さらに、ステップＳ３６以降の処理が繰り返し行われる。この繰り返し処理では、次に曲率二乗線積分が小さい始点（例えば、始点ｕ２）が取り出されて始点ｕ２から上述した線を追跡する処理を行うことにより終端の目印の検出が行われるようになる。さらにまた、この処理においてもステップＳ４０にて追跡が成功していないと判定された場合は、さらに、ステップＳ３６に戻るが始点が残っていないため、ステップＳ４２に分岐し追跡は失敗したとされる。
【００３０】
さらに、ステップＳ３９の処理が行われて、基点近傍の黒画素領域ｘが線状でないと判定された際に、現在の基点付近に終端の目印がなく、交差部があると判定された場合は、二つ目の交差部が検出されたことになり、上述したステップＳ３４以降の処理が行われて二つめの交差部における始点群の各始点を基点とする線を追跡する処理が行われるようになる。このような処理が行われた結果、ステップＳ４１あるいはステップＳ４３の処理が行われた場合は追跡が成功したものとして、ステップＳ４２の処理が行われた場合は追跡が失敗したものとして線追跡処理が終了し、図６に示す帳票処理のステップＳ２１にリターンされる。
【００３１】
上記した線追跡処理における線追跡の具体例を図９ないし図１１に示す。
図９は、交点Ａと交点Ｂで交差する引出線の線追跡を行う場合の例であり、始点領域Ｓから引出線Ｔｓが引き出されている。引出線Ｔｓの始点領域Ｓにおける端点が検索開始点Ｓａとされ、検索開始点Ｓａから方向ｓに向かってステップＳ３０ないしステップＳ３２の処理が繰り返し行われることにより線追跡されていき交点Ａに達する。すると、ステップＳ３１からステップＳ３３に進みステップＳ３３ないしステップＳ３９の処理が行われる。この場合、スプライン曲線で補完された曲線の曲率二乗曲線の最も小さい始点が取り出されて線追跡が行われると方向ａ１の方向へ線追跡されていくようになる。この場合、ステップＳ３０ないしステップＳ３２の処理が繰り返し行われることにより線追跡されていき、交点Ｂに達するようになる。すると、再び  ステップＳ３１からステップＳ３３に進みステップＳ３３ないしステップＳ３９の処理が行われる。この場合、スプライン曲線で補完された曲線の曲率二乗曲線の最も小さい始点が取り出されて線追跡が行われると方向ｂ１の方向へ線追跡されていくようになる。
【００３２】
この線追跡は、ステップＳ３０ないしステップＳ３２の処理が繰り返し行われることにより線追跡が行われていき、引出線Ｔｓの終端に達するようになる。これにより、ステップＳ３１からステップＳ３３に進み終端に目印があることが認識される。これによりステップＳ４３に進み目印で示される指定位置Ｘｓが検索終了点である終端点位置として認識されるようになる。このように、交点Ａにおいて方向ａ２および方向ａ３に進む線追跡、および、交点Ｂにおいて方向ｂ２および方向ｂ３に進む線追跡は行われることなく追跡は成功し、線追跡処理は終了するようになる。
【００３３】
図１０は、交点Ａと交点Ｂで交差すると共に分岐する引出線の線追跡を行う場合の例であり、始点領域Ｓから引出線Ｔｓが引き出されている。引出線Ｔｓの始点領域Ｓにおける端点が検索開始点Ｓａとされ、検索開始点Ｓａから方向ｓに向かってステップＳ３０ないしステップＳ３２の処理が繰り返し行われ線追跡されていき交点Ａに達する。交点Ａにおける処理および交点Ａから交点Ｂに達するまでの処理は図９に示す例と同様の処理が行われ、交点Ｂから方向ｂ１の方向へ線追跡されていくようになる。この線追跡は、ステップＳ３０ないしステップＳ３２の処理が繰り返し行われることにより線追跡が行われていき、分岐点Ｃに達するようになる。この分岐点Ｃにおいても、ステップＳ３１からステップＳ３３に進みステップＳ３３ないしステップＳ３９の処理が行われる。この場合、スプライン曲線で補完された曲線の曲率二乗曲線の最も小さい始点が取り出されて線追跡が行われると方向ｃ１の方向へ線追跡されていくようになる。方向ｃ１に線追跡されていくとその引出線Ｔｓ’の終端に達するが、終端に目印がないことからステップＳ３９からステップＳ４０に進み、追跡は成功せずステップＳ３６に戻る。
【００３４】
この戻ることが図１０において破線の矢印ｃ１’で示されており、ステップＳ３６ないしステップＳ３９の処理が行われることにより残っている始点である方向ｃ２の方向へ線追跡が行われていくようになる。この線追跡が行われていくことにより引出線Ｔｓの終端に達するようになり、ステップＳ３１からステップＳ３３に進み終端に目印があることが認識される。これによりステップＳ４３に進み目印で示される指定位置Ｘｓが検索終了点である終端点位置として認識されるようになる。このように、交点Ａにおいて方向ａ２および方向ａ３に進む線追跡、および、交点Ｂにおいて方向ｂ２および方向ｂ３に進む線追跡は行われることなく追跡は成功し、線追跡処理は終了するようになる。
【００３５】
図１１は、交点Ａと交点Ｂで交差すると共に引出線の終端に目印がない場合の線追跡の例であり、始点領域Ｓから引出線Ｔｓが引き出されている。引出線Ｔｓの始点領域Ｓにおける端点が検索開始点Ｓａとされ、検索開始点Ｓａから方向ｓに向かってステップＳ３０ないしステップＳ３２の処理が繰り返し行われ線追跡されていき交点Ａに達する。交点Ａにおける処理および交点Ａから交点Ｂに達するまでの処理は図９に示す例と同様の処理が行われ、交点Ｂから方向ｂ１の方向へ線追跡されていくようになる。この線追跡は、ステップＳ３０ないしステップＳ３２の処理が繰り返し行われることにより線追跡が行われていき、引出線Ｔｓの終端に達して、ステップＳ３１からステップＳ３３に進む。しかし、引出線Ｔｓの終端には目印がないことからステップＳ３９からステップＳ４０に進み、追跡は成功せずステップＳ３６に戻る。
【００３６】
この戻ることが図１１において破線の矢印ｂ１’で示されており、ステップＳ３６ないしステップＳ３９の処理が行われることにより残っている始点のうち方向ｂ３の方向へ線追跡が行われていくようになる。この線追跡が行われていくことにより交差線Ｋの終端に達するが、交差線Ｋの終端には目印がないことからステップＳ３９からステップＳ４０に進み、追跡は成功せず再びステップＳ３６に戻る。この戻ることが図１１において破線の矢印ｂ３’で示されており、ステップＳ３６ないしステップＳ３９の処理が行われることにより残っている始点である方向ｂ２の方向へ線追跡が行われていくようになる。この線追跡においても交差線Ｋの終端には目印がないことからステップＳ３９からステップＳ４０に進み、追跡は成功せず再びステップＳ３６に戻る。この戻ることが図１１において破線の矢印ｂ２’で示されており、交点Ｂにおいては残る始点がないことから、さらに交点Ａに戻るようになる。
【００３７】
この戻ることが図１１において破線の矢印ａ１’で示されており、ステップＳ３６ないしステップＳ３９の処理が行われることにより残っている始点のうち方向ａ２の方向へ線追跡が行われていくようになる。この線追跡が行われていくことにより交差線Ｊの終端に達するが、交差線Ｊの終端には目印がないことからステップＳ３９からステップＳ４０に進み、追跡は成功せず再びステップＳ３６に戻る。この戻ることが図１１において破線の矢印ａ２’で示されており、ステップＳ３６ないしステップＳ３９の処理が行われることにより残っている始点である方向ａ３の方向へ線追跡が行われていくようになる。この線追跡においても交差線Ｊの終端には目印がないことからステップＳ３９からステップＳ４０に進み、追跡は成功せず再びステップＳ３６に戻る。この戻ることが図１１において破線の矢印ａ３’で示されており、交点Ａにおいては残る始点がないことから、ステップＳ３６からステップＳ４２に進み追跡が失敗としたとして線追跡処理は終了するようになる。
【００３８】
次に、本発明に係る帳票処理装置１で処理される本発明にかかる帳票の他の実施例を図１２に示す。
図１２に示す帳票３は紙媒体に印刷された帳票３であり、目印や引出線および所望の文字情報が手書きされている。帳票３の四隅にはそれぞれ基準点マーク６が印刷されている。基準点マーク６は、あらかじめ配置位置が定められているフォームや画像の相対位置を特定するためのマークとされる。帳票３は、第１フォームＦと第２フォームＨとを有している。図１２に示す例では第２フォームＨは第１フォームＦの下側に配置されているが、これに限らず空き領域に配置することができる。
【００３９】
第１フォームＦには、ほぼ中央に位置する矩形の領域内に鉄骨構造物の概略の形状である概形が描かれた画像５１が印刷されている。第１フォームＦの四隅は始点領域５２，５３，５４，５５とされて、それぞれの始点領域５２〜５５の領域内に始点領域５２〜５５をそれぞれ特定するための認識記号がそれぞれ筆記されている。図１２に示す例では、始点領域５２に「ａ」の認識記号ＡS1が筆記され、始点領域５３に「ｂ」の認識記号ＡS2が筆記され、始点領域５４に「ｃ」の認識記号ＡS3が筆記され、始点領域５５に「ｄ」の認識記号ＡS4が筆記されている。第２フォームＨは、表形式とされており記号領域６０ａと、第１筆記領域６０ｂ、第２筆記領域６０ｃ、第３筆記領域６０ｄとを備えている。記号領域６０ａと第１筆記領域６０ｂないし第３筆記領域６０ｄの行数は、第１フォームＦの始点領域５２〜５５の数と同数とされ、図１２に示す例では４行とされている。４行の記号領域６０ａには、第１フォームＦに筆記されている認識記号と同じ記号の始点記号とされる「ａ」「ｂ」「ｃ」「ｄ」がそれぞれ筆記されている。４行の第１筆記領域６０ｂないし第３筆記領域６０ｄは、始点記号に対応する異常部位の状態、程度および処置が手書きされる領域とされている。
このように構成されている帳票３は、帳票処理装置１において作成されており、その作成方法は本発明にかかる帳票２と同様とされているので、その説明は省略する。
【００４０】
次に、このように構成されている他の実施例の帳票３において、異常部位の状態、程度および処置を取得してデータ化する帳票処理の説明を行う。
図１２に示すように、印刷された帳票３の第１フォームＦ内に印刷されている鉄骨構造物の概略の形状である概形の画像５１の異常部位にそれぞれ目印を記入する。図１２に示す例では、概形の画像５１の左側の下部付近に●印の目印ＸS1が手書きされ、右側の中央部付近に●印の目印ＸS2が手書きされている。目印の形状は予め定められた形状とされており、図１２に示す例では目印が●印とされている。そして、目印ＸS1から引出線ＴS1が始点領域５４内まで手書きされ、目印ＸS2から引出線ＴS2が始点領域５５内まで手書きされている。始点領域５２，５３には引出線は手書きされていない。さらに、第２フォームＨにおいて、記号領域６０ａにおける始点記号「ｃ」に設けられた第１筆記領域６０ｂに「塗装剥れ」と状態が手書きされ、第２筆記領域６０ｃに「軽度」と状態の程度が手書きされ、第３筆記領域６０ｄに「様子を見る」と処置が手書きされている。さらに、記号領域６０ａにおける始点記号「ｄ」に設けられた第１筆記領域６０ｂに「ひび」と状態が手書きされ、第２筆記領域６０ｃに「中度」と状態の程度が手書きされ、第３筆記領域６０ｄに「応急処置をした」と処置が手書きされている。
【００４１】
このように、第１フォームＦにおける概形の画像５１上の異常部位を示す位置に目印ＸS1，ＸS2を手書きすると共に、目印ＸS1，ＸS2のそれぞれから引出線ＴS1，ＴS2を引き出して、それぞれ異なる始点領域５４，５５まで手書きした帳票３を、帳票処理装置１の周辺機器１５とされるスキャナによりイメージデータに変換して帳票処理装置１に取り込む。この際に、帳票処理装置１においては帳票処理プログラムが起動されており、帳票３のイメージデータが取り込まれると、帳票処理装置１において帳票３の帳票処理が行われる。
帳票処理では、まず取り込まれたイメージデータから基準点マーク６を画像認識し、認識された複数の基準点マーク６から基準点が決定され、この基準点からの相対座標を用いて第２フォームＨの領域をイメージデータから切り出す。切り出された第２フォームＨの領域のイメージデータを文字認識することにより、記号領域６０ａの始点記号を認識すると共に、始点記号毎に設けられた第１筆記領域６０ｂないし第３筆記領域６０ｄに手書きされている状態、程度および処置を文字認識する。
【００４２】
次いで、基準点からの相対座標を用いて第１フォームＦにおける始点領域の一つをイメージデータから切り出す。切り出された始点領域の近辺に引出線の筆記があるか認識され、引出線があると認識された場合は、その引出線の端点を基点として始点領域から線追跡を行う。図１２に示す例では始点領域５４，５５に筆記があると認識されて、始点領域５４，５５から線追跡を行うことにより、引出線が繋がれている目印が認識される。そして、その目印の位置を異常部位を示す位置として認識された目印の基準点からの相対座標を取得する。次いで、取得した目印の相対座標を第１フォームＦに貼り付けられている画像５１上の座標に変換する。この変換は、前述した図４（ａ）（ｂ）と同様に行われる。この変換された座標から、目印で示される画像５１上で指定された異常部位を認識することができる。次いで、認識された目印と引出線で繋がれている始点領域に筆記されている認識記号と一致する、第２フォームＨの記号領域６０ａの始点記号に設けられた第１筆記領域６０ｂないし第３筆記領域６０ｄに筆記された状態、程度および処置と、認識された目印とを関連づける。これにより、認識された目印で示される異常部位と状態、程度および処置が結びつけられた電子化データが得られるようになる。
【００４３】
例を挙げて具体的に説明すると、例えば図１２における始点領域５４をイメージデータから切り出す。切り出された始点領域５４の近辺には引出線ＴS1があると認識され、認識された引出線ＴS1の端点を基点として線追跡を行う。線追跡を行うことにより、引出線ＴS1が繋がれている目印ＸS1が認識され、その目印ＸS1の位置を異常部位を示す位置として目印ＸS1の基準点からの相対座標を取得する。次いで、取得した目印ＸS1の相対座標を画像５１の座標に変換する。この変換された座標から、目印ＸS1で示される画像５１上で指定された異常部位が鉄骨構造物の左側の下部付近と認識されるようになる。そして、目印ＸS1と引出線ＴS1で繋がれている始点領域５４に筆記されている認識記号「ａ」と一致する、第２フォームＨの記号領域６０ａの始点記号「ａ」に設けられた第１筆記領域６０ｂないし第３筆記領域６０ｄに筆記された状態「塗装剥れ」、程度「軽度」および処置「様子を見る」と、認識された目印ＸS1とを関連づける。これにより、目印ＸS1で示される鉄骨構造物の左側の下部付近に状態「塗装剥れ」、程度「軽度」および処置「様子を見る」とが結びつけられた電子化データが得られるようになる。
【００４４】
次に、本発明に係る帳票処理装置１で処理される本発明にかかる帳票の他の実施例の変形例を図１３に示す。
図１３に示す帳票４は紙媒体に印刷された帳票４であり、目印や引出線および所望の文字情報が手書きされている。帳票４の四隅にはそれぞれ基準点マーク７が印刷されている。基準点マーク７は、あらかじめ配置位置が定められているフォームや画像の相対位置を特定するためのマークとされる。帳票４は、第１フォームＦと第２フォームＨとを有している。図１３に示す例では第２フォームＨは第１フォームＦの下側に配置されているが、これに限らず空き領域に配置することができる。
【００４５】
第１フォームＦには、ほぼ中央に位置する矩形の領域内に車の輪郭とされる概形が描かれた画像７１が印刷されている。第１フォームＦの四隅は始点領域７２，７３，７４，７５とされて、それぞれの始点領域７２〜７５の領域内に始点領域７２〜７５をそれぞれ特定するための認識記号がそれぞれ筆記されている。図１３に示す例では、始点領域７２に「ａ」の認識記号ＡS1が筆記され、始点領域７３に「ｂ」の認識記号ＡS2が筆記され、始点領域７４に「ｃ」の認識記号ＡS3が筆記され、始点領域７５に「ｄ」の認識記号ＡS4が筆記されている。第２フォームＨは、表形式とされており記号領域８０ａと、第１筆記領域８０ｂ、第２筆記領域８０ｃ、第３筆記領域８０ｄとを備えている。記号領域８０ａと第１筆記領域８０ｂないし第３筆記領域８０ｄの行数は、第１フォームＦの始点領域７２〜７５の数と同数とされ、図１３に示す例では４行とされている。４行の記号領域８０ａには、第１フォームＦに筆記されている認識記号と同じ記号の始点記号とされる「ａ」「ｂ」「ｃ」「ｄ」がそれぞれ筆記されている。４行の第１筆記領域８０ｂないし第３筆記領域８０ｄは、始点記号に対応する異常部位の状態、程度および処置が手書きされる領域とされている。
このように構成されている帳票４は、帳票処理装置１において作成されており、その作成方法は本発明にかかる帳票２と同様とされているので、その説明は省略する。
【００４６】
次に、このように構成されている他の実施例の帳票４において、異常部位の状態、程度および処置を取得してデータ化する帳票処理の説明を行う。
図１３に示すように、印刷された帳票４の第１フォームＦ内に印刷されている車の輪郭である概形の画像７１の異常部位にそれぞれ目印を記入する。図１３に示す例では、概形の画像７１の前部付近に★印の目印ＸS1が手書きされ、中央後方付近に★印の目印ＸS2が手書きされている。目印の形状は予め定められた形状とされており、図１３に示す例では目印が★印とされている。そして、目印ＸS1から引出線ＴS1が始点領域７２内まで手書きされ、目印ＸS2から引出線ＴS2が始点領域７３内まで手書きされている。始点領域７４，７５には引出線は手書きされていない。さらに、第２フォームＨにおいて、記号領域８０ａにおける始点記号「ａ」に設けられた第１筆記領域８０ｂに「よごれ」と状態が手書きされ、第２筆記領域８０ｃに「中度」と状態の程度が手書きされ、第３筆記領域８０ｄに「除去した」と処置が手書きされている。さらに、記号領域８０ａにおける始点記号「ｂ」に設けられた第１筆記領域８０ｂに「塗装はげ」と状態が手書きされ、第２筆記領域８０ｃに「軽度」と状態の程度が手書きされ、第３筆記領域８０ｄに「後日再塗装」と処置が手書きされている。
【００４７】
このように、第１フォームＦにおける概形の画像７１上の異常部位を示す位置に目印ＸS1，ＸS2を手書きすると共に、目印ＸS1，ＸS2のそれぞれから引出線ＴS1，ＴS2を引き出して、それぞれ異なる始点領域７２，７３まで手書きした帳票４を、帳票処理装置１の周辺機器１５とされるスキャナによりイメージデータに変換して帳票処理装置１に取り込む。この際に、帳票処理装置１においては帳票処理プログラムが起動されており、帳票４のイメージデータが取り込まれると、帳票処理装置１において帳票４の帳票処理が行われる。
帳票処理では、まず取り込まれたイメージデータから基準点マーク７を画像認識し、認識された複数の基準点マーク７から基準点が決定され、この基準点からの相対座標を用いて第２フォームＨの領域をイメージデータから切り出す。切り出された第２フォームＨの領域のイメージデータを文字認識することにより、記号領域８０ａの始点記号を認識すると共に、始点記号毎に設けられた第１筆記領域８０ｂないし第３筆記領域８０ｄに手書きされている状態、程度および処置を文字認識する。
【００４８】
次いで、基準点からの相対座標を用いて第１フォームＦにおける始点領域の一つをイメージデータから切り出す。切り出された始点領域の近辺に引出線の筆記があるか認識され、引出線があると認識された場合は、その引出線の端点を基点として始点領域から線追跡を行う。図１３に示す例では始点領域７２，７３に筆記があると認識されて、始点領域７２，７３から線追跡を行うことにより、引出線が繋がれている目印が認識される。そして、その目印の位置を異常部位を示す位置として認識された目印の基準点からの相対座標を取得する。次いで、取得した目印の相対座標を第１フォームＦに貼り付けられている画像７１の座標に変換する。この変換は、前述した図４（ａ）（ｂ）と同様に行われる。この変換された座標から、目印で示される画像７１上で指定された異常部位を認識することができる。次いで、認識された目印と引出線で繋がれている始点領域に筆記されている認識記号と一致する、第２フォームＨの記号領域８０ａの始点記号に設けられた第１筆記領域８０ｂないし第３筆記領域８０ｄに筆記された状態、程度および処置と、認識された目印とを関連づける。これにより、認識された目印で示される異常部位と状態、程度および処置が結びつけられた電子化データが得られるようになる。
【００４９】
例を挙げて具体的に説明すると、例えば図１３における始点領域７２をイメージデータから切り出す。切り出された始点領域７２近辺には引出線ＴS1があると認識され、認識された引出線ＴS1の端点を基点として線追跡を行う。線追跡を行うことにより、引出線ＴS1が繋がれている目印ＸS1が認識され、その目印ＸS1の位置を異常部位を示す位置として目印ＸS1の基準点からの相対座標を取得する。次いで、取得した目印ＸS1の相対座標を画像７１上の座標に変換する。この変換された座標から、目印ＸS1で示される画像７１上で指定された異常部位が車の前部付近と認識されるようになる。そして、目印ＸS1と引出線ＴS1で繋がれている始点領域７２に筆記されている認識記号「ａ」と一致する、第２フォームＨの記号領域８０ａの始点記号「ａ」に設けられた第１筆記領域８０ｂないし第３筆記領域８０ｄに筆記された状態「よごれ」、程度「中度」および処置「除去した」と、認識された目印ＸS1とを関連づける。これにより、目印ＸS1で示される車の前部付近に状態「よごれ」、程度「中度」および処置「除去した」とが結びつけられた電子化データが得られるようになる。
【産業上の利用可能性】
【００５０】
以上説明した帳票処理装置では、主に医療事務に用いる帳票を処理するものとした。本発明の帳票処理装置はこれに限るものではなく、一般的な事務処理に用いる帳票に適用することができる。さらに、他の実施例の帳票で示すように人型の画像のように輪郭とされた画像に替えて構造物や機械等の物体の概略の形状とされる概形の画像を第１フォームに貼り付けて印刷した帳票として、この画像上の位置に目印を手書きすることにより異常等の特別な箇所を示すようにし、この目印で示す位置へ、第２フォームに手書きした文字情報を関連づけて電子化データを得るようにしてもよい。
なお、本発明にかかる帳票においては基準点マークを設けるようにしたが、基準点マークを設けることなく特定のフォームの特定の角を基準点とするようにしてもよい。なお、認識記号および始点記号はアルファベットを用いるようにしたが、これに限るものではなく数字あるいは星印や矢印等の認識記号と始点記号のペアとして判別可能なあらゆる記号を用いることができる。
【図面の簡単な説明】
【００５１】
【図１】本発明の実施例の帳票処理プログラムを備える帳票処理装置のハードウェア構成の一例を示すブロック図である。
【図２】本発明にかかる帳票処理装置で処理される帳票の実施例を示す図である。
【図３】本発明にかかる帳票処理装置で処理される帳票に手書きした状態を示す図である。
【図４】本発明にかかる帳票処理装置で処理される帳票における座標変換を示す図である。
【図５】本発明にかかる帳票処理装置において実行される帳票処理の一部のフローチャートである。
【図６】本発明にかかる帳票処理装置において実行される帳票処理の残る部分のフローチャートである。
【図７】本発明にかかる帳票処理装置で実行される帳票処理における線追跡処理のフローチャートである。
【図８】本発明にかかる帳票処理装置で実行される帳票処理における線追跡処理を説明するための図である。
【図９】本発明にかかる帳票処理装置で実行される帳票処理における線追跡処理の具体的な線追跡の例を示す図である。
【図１０】本発明にかかる帳票処理装置で実行される帳票処理における線追跡処理の具体的な線追跡の他の例を示す図である。
【図１１】本発明にかかる帳票処理装置で実行される帳票処理における線追跡処理の具体的な線追跡のさらに他の例を示す図である。
【図１２】本発明にかかる帳票処理装置で処理される他の実施例の帳票に手書きした状態を示す図である。
【図１３】本発明にかかる帳票処理装置で処理される他の実施例の変形例の帳票に手書きした状態を示す図である。
【図１４】帳票に印刷された人型を描いた紙面を示す図である。
【図１５】帳票に印刷された人型を描いた紙面に手書きした状態を示す図である。
【符号の説明】
【００５２】
１  帳票処理装置、２，３，４  帳票、５，６，７  基準点マーク、１０  ＣＰＵ、１１  ＲＯＭ、１２  ＲＡＭ、１３  記憶装置、１４  インターフェース、１５  周辺機器、１６  通信インターフェース、１７  通信ネットワーク、１８  サーバコンピュータ、１９  検出回路、２０  操作子、２１  表示回路、２２  ディスプレイ、２３  バス、３１，５１，７１  画像、３２，５２，７２  始点領域、３３，５３，７３  始点領域、３４，５４，７４  始点領域、３５，５５，７５  始点領域、４０ａ，６０ａ，８０ａ  記号領域、４０ｂ  筆記領域、６０ｂ，８０ｂ  第１筆記領域、６０ｃ，８０ｃ  第２筆記領域、６０ｄ，８０ｄ  第３筆記領域、１００  帳票、１０１  人型、Ｆ  第１フォーム、Ｈ  第２フォーム
【図１】
2007179340.tif 000003
【図２】
2007179340.tif 000004
【図３】
2007179340.tif 000005
【図４】
2007179340.tif 000006
【図５】
2007179340.tif 000007
【図６】
2007179340.tif 000008
【図７】
2007179340.tif 000009
【図８】
2007179340.tif 000010
【図９】
2007179340.tif 000011
【図１０】
2007179340.tif 000012
【図１１】
2007179340.tif 000013
【図１２】
2007179340.tif 000014
【図１３】
2007179340.tif 000015
【図１４】
2007179340.tif 000016
【図１５】
2007179340.tif 000017
【手続補正書】
【提出日】平成18年9月29日(2006.9.29)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
所定の画像が印刷されていると共に、始点を識別するそれぞれの認識記号が印刷されている複数の始点領域を備える第１のフォームと、前記認識記号に対応する始点記号がそれぞれ印刷された記号領域と、該始点記号毎に設けられている筆記領域とを備える第２のフォームとを備える帳票であって、
前記第１のフォームにおいて、前記画像上に所定の目印を手書きすると共に、手書きした目印毎に１つの前記始点領域とを繋ぐ引出線を手書きし、前記第２のフォームにおいて前記始点記号毎に設けられた前記筆記領域に手書きで情報を筆記した状態の帳票として、当該帳票をイメージデータに変換して処理した際に、前記始点領域が認識されることにより当該始点領域において認識された前記引出線が追跡され、追跡された前記引出線の終端に検出された目印における前記画像上の位置情報が認識されて、当該位置情報が、当該始点領域の前記認識記号と一致する前記始点記号に設けられた前記筆記領域に筆記されている前記情報に関連づけられることを特徴とする帳票。
【請求項２】
前記画像が輪郭あるいは概形の画像とされ、前記目印が特別な箇所の位置を指定する目印とされていると共に、前記筆記領域が前記目印で指定した特別な箇所に対応する情報を筆記する筆記領域とされていることを特徴とする請求項１記載の帳票。
【請求項３】
前記検出された目印における前記画像上の位置情報が、前記目印における第１のフォームに対する相対座標を、前記画像における座標に変換した位置情報とされていることを特徴とする請求項１記載の帳票。
【請求項４】
所定の画像が印刷されていると共に、始点を識別するそれぞれの認識記号が印刷されている複数の始点領域を備える第１のフォームと、前記認識記号に対応する始点記号がそれぞれ印刷された記号領域と、該始点記号毎に設けられている筆記領域とを備える第２のフォームとを備える帳票をイメージデータに変換することのできる変換手段と、
該変換手段により変換されたイメージデータを処理する処理手段とを備え、
前記処理手段は、
前記第１のフォームにおいて、前記始点領域において認識された手書きの引出線を追跡することにより前記画像上に手書きされた所定の目印を検出する目印検出手段と、
該目印検出手段で検出された前記目印の前記画像上の位置情報を認識する位置情報認識手段と、
該位置情報認識手段で認識された当該位置情報を、当該始点領域の前記認識記号と一致する前記始点記号に設けられた前記筆記領域に筆記されている情報に関連づける関連づけ手段と、
を備えるようにしたことを特徴とする帳票処理装置。
【請求項５】
前記画像が輪郭あるいは概形の画像とされ、前記目印により特別な箇所の位置が指定されていると共に、前記筆記領域に前記目印で指定した特別な箇所に対応する情報が筆記されていることを特徴とする請求項４記載の帳票処理装置。
【請求項６】
前記引出線を追跡することにより検出した前記目印における前記第１のフォームに対する相対座標を、前記画像における座標に変換することにより、前記目印の前記画像上の位置情報を取得するようにしたことを特徴とする請求項４記載の帳票処理装置。
【請求項７】
所定の画像が印刷されていると共に、始点を識別するそれぞれの認識記号が印刷されている複数の始点領域を備える第１のフォームと、前記認識記号に対応する始点記号がそれぞれ印刷された記号領域と、該始点記号毎に設けられている筆記領域とを備える第２のフォームとを備える帳票をイメージデータに変換することのできる変換手段を備えるコンピュータを、
該変換手段により変換されたイメージデータを処理する処理手段として機能させる帳票処理プログラムであって、
前記処理手段は、
前記第１のフォームにおいて、前記始点領域において認識された手書きの引出線を追跡することにより前記画像上に手書きされた所定の目印を検出する目印検出手段、
該目印検出手段で検出された前記目印の前記画像上の位置情報を認識する位置情報認識手段、
該位置情報認識手段で認識された当該位置情報を、当該始点領域の前記認識記号と一致する前記始点記号に設けられた前記筆記領域に筆記されている情報に関連づける関連づけ手段、
として機能するようにしたことを特徴とする帳票処理プログラム。
【請求項８】
前記画像が輪郭あるいは概形の画像とされ、前記目印により特別な箇所の位置が指定されていると共に、前記筆記領域に前記目印で指定した特別な箇所に対応する情報が筆記されていることを特徴とする請求項７記載の帳票処理プログラム。
【請求項９】
前記引出線を追跡することにより検出した前記目印における前記第１のフォームに対する相対座標を、前記画像における座標に変換することにより、前記目印の前記画像上の位置情報を取得するようにしたことを特徴とする請求項７記載の帳票処理プログラム。