(57)【特許請求の範囲】
【請求項１】
筆跡情報を生成するとともに、有線または無線で直接接続される端末装置に当該筆跡情報を送信する筆跡情報生成装置であって、
媒体に印刷された符号画像を読み取る符号画像読取手段と、
前記符号画像読取手段にて読み取られた前記符号画像から所定の情報を取得する情報取得手段と、
前記情報取得手段にて取得された前記所定の情報に基づき前記媒体へのユーザの筆記操作に関連した情報である筆跡情報を生成する筆跡情報生成手段と、
前記情報取得手段にて取得された前記所定の情報および/または前記筆跡情報生成手段にて生成された前記筆跡情報を所定のデータ長からなるデータ群単位で前記端末装置に送信する送信手段とを備え、
前記送信手段は、前記端末装置から所定のインターバルで順次、当該送信手段に送信される送信要求信号に同期させて前記所定の情報および/または前記筆跡情報を前記データ群毎に順に送信することを特徴とする筆跡情報生成装置。
【請求項２】
前記符号画像読取手段は、前記符号画像を前記媒体から所定の周期で読み取り、前記情報取得手段は、当該所定の周期で読み取られた当該符号画像から前記所定のデータ長の前記所定の情報を取得し、前記筆跡情報生成手段は、当該所定のデータ長の当該所定の情報から当該所定のデータ長の前記筆跡情報を生成し、
前記送信手段は、前記情報取得手段および/または前記筆跡情報生成手段から前記所定のデータ長の前記所定の情報および/または前記筆跡情報を前記データ群として取得し、取得した当該データ群を送信することを特徴とする請求項１記載の筆跡情報生成装置。
【請求項３】
前記送信手段は、前記端末装置から前記送信要求信号を受けた後に取得した前記データ群を当該データ群の先頭データから送信することを特徴とする請求項２記載の筆跡情報生成装置。
【請求項４】
前記送信手段は、前記端末装置から前記送信要求信号を受けた後に取得した前記データ群の先頭データを検出して、当該送信要求信号に同期させて送信する当該データ群を当該先頭データが検出された当該データ群に設定することを特徴とする請求項２記載の筆跡情報生成装置。
【請求項５】
筆跡情報を生成するとともに、有線または無線で直接接続される端末装置に当該筆跡情報を送信する筆跡情報生成装置に、
符号画像が印刷された媒体から読み取られた当該符号画像から所定の情報を取得する機能と、
取得された前記所定の情報に基づき前記媒体へのユーザの筆記操作に関連した情報である筆跡情報を生成する機能と、
取得された前記所定の情報および/または生成された前記筆跡情報を送信する端末装置から所定のインターバルで順次、前記筆跡情報生成装置に送信される送信要求信号に同期させて、当該所定の情報および/または当該筆跡情報を所定のデータ長からなるデータ群毎に順に当該端末装置に送信させる機能と
を実現させることを特徴とするプログラム。
【請求項６】
前記送信させる機能は、前記所定の情報および/または前記筆跡情報を前記所定のデータ長の前記データ群として順に取得し、前記端末装置から前記送信要求信号を受けた後に取得した当該データ群を当該データ群の先頭データから送信させることを特徴とする請求項５記載のプログラム。
【請求項７】
前記送信させる機能は、前記所定の情報および/または前記筆跡情報を前記所定のデータ長の前記データ群として順に取得し、前記端末装置から前記送信要求信号を受けた後に取得した当該データ群の先頭データを検出して、当該送信要求信号に同期させて送信する当該データ群を当該先頭データが検出された当該データ群に設定することを特徴とする請求項５記載のプログラム。
【請求項８】
電子文書に基づく文書画像と符号画像とが印刷された媒体へのユーザの筆記操作に関連した情報である筆跡情報を生成し、当該符号画像から所定の情報を取得する筆跡情報生成装置と、
前記所定の情報および/または前記筆跡情報を前記媒体または当該媒体に印刷された前記電子文書に関連付けて管理する筆跡情報管理装置と、
前記筆跡情報生成装置から前記所定の情報および/または前記筆跡情報を取得し、取得した当該所定の情報および/または当該筆跡情報を前記筆跡情報管理装置に送信する情報送信装置とを有し、
前記筆跡情報生成装置は、
媒体に印刷された符号画像を読み取る符号画像読取手段と、
前記符号画像読取手段にて読み取られた前記符号画像から所定の情報を取得する情報取得手段と、
前記情報取得手段にて取得された前記所定の情報に基づき前記媒体へのユーザの筆記操作に関連した情報である筆跡情報を生成する筆跡情報生成手段と、
前記情報取得手段にて取得された前記所定の情報および/または前記筆跡情報生成手段にて生成された前記筆跡情報を所定のデータ長からなるデータ群単位で前記情報送信装置に送信する送信手段とを備え、
前記送信手段は、前記情報送信装置から所定のインターバルで順次、当該送信手段に送信される送信要求信号に同期させて前記所定の情報および/または前記筆跡情報を前記データ群毎に順に送信することを特徴とする筆跡情報管理システム。
【請求項９】
前記筆跡情報生成装置の前記送信手段は、前記所定の情報および/または前記筆跡情報を前記所定のデータ長の前記データ群として順に取得し、前記情報送信装置から前記送信要求信号を受けた後に取得した前記データ群を当該データ群の先頭データから送信することを特徴とする請求項８記載の筆跡情報管理システム。
【請求項１０】
前記筆跡情報生成装置の前記送信手段は、前記所定の情報および/または前記筆跡情報を前記所定のデータ長の前記データ群として順に取得し、前記情報送信装置から前記送信要求信号を受けた後に取得した当該データ群の先頭データを検出して、当該送信要求信号に同期させて送信する当該データ群を当該先頭データが検出された当該データ群に設定することを特徴とする請求項８記載の筆跡情報管理システム。
【請求項１１】
前記情報送信装置は、前記筆跡情報生成装置から取得した前記所定の情報および/または前記筆跡情報にデータ欠損が生じているか否かを前記データ群単位で判定することを特徴とする請求項８記載の筆跡情報管理システム。
【請求項１２】
前記情報送信装置は、前記所定の情報および/または前記筆跡情報にデータ欠損が生じているか否かを判定するに際して、前記筆跡情報生成装置に送信する前記送信要求信号の送信タイミングを変更することを特徴とする請求項１１記載の筆跡情報管理システム。
【請求項１３】
前記情報送信装置は、前記データ欠損が生じていると判定された前記データ群を廃棄することを特徴とする請求項８記載の筆跡情報管理システム。
【請求項１４】
前記筆跡情報生成装置は、前記筆跡情報生成装置に送信した前記所定の情報および/または前記筆跡情報にデータ欠損が生じているか否かを前記データ群単位で判定することを特徴とする請求項８記載の筆跡情報管理システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、筆跡情報生成装置、プログラムおよび筆跡情報管理システムに関する。
【背景技術】
【０００２】
近年、用紙等の媒体上に筆記された文字や図形等が電子データに変換され、それがパソコンや携帯電話等に転送されて、筆記内容が記憶等される技術が注目されている。
例えば特許文献１に記載された技術では、微細なドットによる様々なパターンの符号画像が印刷された媒体と、例えば撮像素子が内蔵されたペンデバイスとを用いて、ペンデバイスにより筆記された文字や図形等の位置の符号画像を撮像素子に読み込む。それにより、文字や図形等の位置座標を特定して、筆記された文字や図形等からなる電子文書の生成や、所定の電子文書への文字や図形等の付加等を行う。
また、例えば特許文献２に記載された技術では、ペンデバイスにより媒体上の所定の領域に印刷された符号画像を読み取ることで、例えば、コンピュータにウェブブラウザプログラムを開くように指示するコマンドを作成し、所定のウェブアドレス等にリンクさせる。
【０００３】
【特許文献１】特開２００４−９４９０７号公報
【特許文献２】特表２００３−５２３５７２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ここで一般に、媒体上の符号画像を読み取って筆跡情報を生成する例えばペンデバイス等の筆跡情報生成装置では、筆跡情報等を管理するための例えば端末装置等に向けて、読み取った筆跡情報等を送信する。その際に、例えば送信先である端末装置への通信速度が低下して、筆跡情報生成装置にて生成された筆跡情報等の一部が送信できない場合がある。その場合には、端末装置等が受け取った筆跡情報等の一部に欠損が生じ、筆跡情報等の信頼性が低下する可能性がある。
本発明は、端末装置にて筆跡情報生成装置から取得された筆跡情報等の信頼性の低下を抑制することを目的とする。
【課題を解決するための手段】
【０００５】
請求項１に記載の発明は、筆跡情報を生成するとともに、有線または無線で直接接続される端末装置に当該筆跡情報を送信する筆跡情報生成装置であって、  媒体に印刷された符号画像を読み取る符号画像読取手段と、前記符号画像読取手段にて読み取られた前記符号画像から所定の情報を取得する情報取得手段と、前記情報取得手段にて取得された前記所定の情報に基づき前記媒体へのユーザの筆記操作に関連した情報である筆跡情報を生成する筆跡情報生成手段と、前記情報取得手段にて取得された前記所定の情報および/または前記筆跡情報生成手段にて生成された前記筆跡情報を所定のデータ長からなるデータ群単位で前記端末装置に送信する送信手段とを備え、前記送信手段は、前記端末装置から所定のインターバルで順次、当該送信手段に送信される送信要求信号に同期させて前記所定の情報および/または前記筆跡情報を前記データ群毎に順に送信することを特徴とする筆跡情報生成装置である。
【０００６】
請求項２に記載の発明は、前記符号画像読取手段は、前記符号画像を前記媒体から所定の周期で読み取り、前記情報取得手段は、当該所定の周期で読み取られた当該符号画像から前記所定のデータ長の前記所定の情報を取得し、前記筆跡情報生成手段は、当該所定のデータ長の当該所定の情報から当該所定のデータ長の前記筆跡情報を生成し、前記送信手段は、前記情報取得手段および/または前記筆跡情報生成手段から前記所定のデータ長の前記所定の情報および/または前記筆跡情報を前記データ群として取得し、取得した当該データ群を送信することを特徴とする請求項１記載の筆跡情報生成装置である。
請求項３に記載の発明は、前記送信手段は、前記端末装置から前記送信要求信号を受けた後に取得した前記データ群を当該データ群の先頭データから送信することを特徴とする請求項２記載の筆跡情報生成装置である。
請求項４に記載の発明は、前記送信手段は、前記端末装置から前記送信要求信号を受けた後に取得した前記データ群の先頭データを検出して、当該送信要求信号に同期させて送信する当該データ群を当該先頭データが検出された当該データ群に設定することを特徴とする請求項２記載の筆跡情報生成装置である。
【０００７】
請求項５に記載の発明は、筆跡情報を生成するとともに、有線または無線で直接接続される端末装置に当該筆跡情報を送信する筆跡情報生成装置に、符号画像が印刷された媒体から読み取られた当該符号画像から所定の情報を取得する機能と、取得された前記所定の情報に基づき前記媒体へのユーザの筆記操作に関連した情報である筆跡情報を生成する機能と、取得された前記所定の情報および/または生成された前記筆跡情報を送信する端末装置から所定のインターバルで順次、前記筆跡情報生成装置に送信される送信要求信号に同期させて、当該所定の情報および/または当該筆跡情報を所定のデータ長からなるデータ群毎に順に当該端末装置に送信させる機能とを実現させることを特徴とするプログラムである。
請求項６に記載の発明は、前記送信させる機能は、前記所定の情報および/または前記筆跡情報を前記所定のデータ長の前記データ群として順に取得し、前記端末装置から前記送信要求信号を受けた後に取得した当該データ群を当該データ群の先頭データから送信させることを特徴とする請求項５記載のプログラムである。
請求項７に記載の発明は、前記送信させる機能は、前記所定の情報および/または前記筆跡情報を前記所定のデータ長の前記データ群として順に取得し、前記端末装置から前記送信要求信号を受けた後に取得した当該データ群の先頭データを検出して、当該送信要求信号に同期させて送信する当該データ群を当該先頭データが検出された当該データ群に設定することを特徴とする請求項５記載のプログラムである。
【０００８】
請求項８に記載の発明は、電子文書に基づく文書画像と符号画像とが印刷された媒体へのユーザの筆記操作に関連した情報である筆跡情報を生成し、当該符号画像から所定の情報を取得する筆跡情報生成装置と、前記所定の情報および/または前記筆跡情報を前記媒体または当該媒体に印刷された前記電子文書に関連付けて管理する筆跡情報管理装置と、前記筆跡情報生成装置から前記所定の情報および/または前記筆跡情報を取得し、取得した当該所定の情報および/または当該筆跡情報を前記筆跡情報管理装置に送信する情報送信装置とを有し、前記筆跡情報生成装置は、媒体に印刷された符号画像を読み取る符号画像読取手段と、前記符号画像読取手段にて読み取られた前記符号画像から所定の情報を取得する情報取得手段と、前記情報取得手段にて取得された前記所定の情報に基づき前記媒体へのユーザの筆記操作に関連した情報である筆跡情報を生成する筆跡情報生成手段と、前記情報取得手段にて取得された前記所定の情報および/または前記筆跡情報生成手段にて生成された前記筆跡情報を所定のデータ長からなるデータ群単位で前記情報送信装置に送信する送信手段とを備え、前記送信手段は、前記情報送信装置から所定のインターバルで順次、当該送信手段に送信される送信要求信号に同期させて前記所定の情報および/または前記筆跡情報を前記データ群毎に順に送信することを特徴とする筆跡情報管理システムである。
【０００９】
請求項９に記載の発明は、前記筆跡情報生成装置の前記送信手段は、前記所定の情報および/または前記筆跡情報を前記所定のデータ長の前記データ群として順に取得し、前記情報送信装置から前記送信要求信号を受けた後に取得した前記データ群を当該データ群の先頭データから送信することを特徴とする請求項８記載の筆跡情報管理システムである。
請求項１０に記載の発明は、前記筆跡情報生成装置の前記送信手段は、前記所定の情報および/または前記筆跡情報を前記所定のデータ長の前記データ群として順に取得し、前記情報送信装置から前記送信要求信号を受けた後に取得した当該データ群の先頭データを検出して、当該送信要求信号に同期させて送信する当該データ群を当該先頭データが検出された当該データ群に設定することを特徴とする請求項８記載の筆跡情報管理システムである。
請求項１１に記載の発明は、前記情報送信装置は、前記筆跡情報生成装置から取得した前記所定の情報および/または前記筆跡情報にデータ欠損が生じているか否かを前記データ群単位で判定することを特徴とする請求項８記載の筆跡情報管理システムである。
【００１０】
請求項１２に記載の発明は、前記情報送信装置は、前記所定の情報および/または前記筆跡情報にデータ欠損が生じているか否かを判定するに際して、前記筆跡情報生成装置に送信する前記送信要求信号の送信タイミングを変更することを特徴とする請求項１１記載の筆跡情報管理システムである。
請求項１３に記載の発明は、前記情報送信装置は、前記データ欠損が生じていると判定された前記データ群を廃棄することを特徴とする請求項８記載の筆跡情報管理システムである。
請求項１４に記載の発明は、前記筆跡情報生成装置は、前記筆跡情報生成装置に送信した前記所定の情報および/または前記筆跡情報にデータ欠損が生じているか否かを前記データ群単位で判定することを特徴とする請求項８記載の筆跡情報管理システムである。
【発明の効果】
【００１１】
本発明の請求項１によれば、本発明を採用しない場合に比べて、端末装置にて筆跡情報生成装置から取得された筆跡情報等の信頼性の低下を抑制することができる。
本発明の請求項２によれば、所定周期で読み取られた符号画像に対応させたデータ長のデータ群としてデータ送信することから、読み取った符号画像単位でデータの送信を調整でき、本発明を採用しない場合に比べて、通信エラーが生じた場合のエラー処理を円滑に行うことができる。
本発明の請求項３によれば、本発明を採用しない場合に比べて、各データ群の途中から送信されることが抑制され、符号画像に対応させたデータ長のデータ群単位でデータを送信することができる。
本発明の請求項４によれば、各データ群の先頭データを検出することで本発明を採用しない場合に比べて各データ群の途中から送信されることが抑制され、符号画像に対応させたデータ長のデータ群単位でデータを送信できる。
【００１２】
本発明の請求項５によれば、本発明を採用しない場合に比べて、端末装置にて筆跡情報生成装置から取得された筆跡情報等の信頼性の低下を抑制することができる。
本発明の請求項６によれば、本発明を採用しない場合に比べて、各データ群の途中から送信されることが抑制され、符号画像に対応させたデータ長のデータ群単位でデータを送信することができる。
本発明の請求項７によれば、各データ群の先頭データを検出することで本発明を採用しない場合に比べて各データ群の途中から送信されることが抑制され、符号画像に対応させたデータ長のデータ群単位でデータを送信できる。
【００１３】
本発明の請求項８によれば、本発明を採用しない場合に比べて、筆跡情報管理装置に対して筆跡情報等を送信する端末装置にて筆跡情報生成装置から取得された筆跡情報等の信頼性の低下を抑制することができる。
本発明の請求項９によれば、本発明を採用しない場合に比べて、各データ群の途中から送信されることが抑制され、符号画像に対応させたデータ長のデータ群単位でデータを送信することができる。
本発明の請求項１０によれば、各データ群の先頭データを検出することで本発明を採用しない場合に比べて各データ群の途中から送信されることが抑制され、符号画像に対応させたデータ長のデータ群単位でデータを送信できる。
【００１４】
本発明の請求項１１によれば、データ群単位でエラーデータを抽出できるので、本発明を採用しない場合に比べて、データの損失を最小限に抑えることができる。
本発明の請求項１２によれば、本発明を採用しない場合に比べて、エラーデータの抽出をより確実に行うことができ、データの信頼性の低下を抑制することができる。
本発明の請求項１３によれば、エラーデータが廃棄されるので、本発明を採用しない場合に比べて、筆跡情報管理装置に送信するデータの信頼性の低下を抑制することができる。
本発明の請求項１４によれば、データ群単位でエラーデータを抽出できるので、本発明を採用しない場合に比べて、データの損失を最小限に抑えることができる。
【発明を実施するための最良の形態】
【００１５】
以下、添付図面を参照して、本発明を実施するための最良の形態(以下、「実施の形態」という)について詳細に説明する。
まず、本実施の形態における筆跡情報管理システムの全体構成について説明する。
図１は、本実施の形態の筆跡情報管理システムの構成の一例を示した図である。図１に示したように、この筆跡情報管理システムは、端末装置１０と、筆跡情報管理装置の一例としての文書サーバ２０と、筆跡情報管理装置の一例としての識別情報サーバ３０と、画像形成装置４０と、情報送信装置の一例としての端末装置５０とがネットワーク８０に接続されることにより構成されている。また、端末装置５０には、筆跡情報生成装置の一例としてのデジタルペン６０が通信可能に接続されている。
【００１６】
本実施の形態の筆跡情報管理システムでは、端末装置１０から電子文書の印刷要求が行われると、筆跡情報管理装置の一例である文書サーバ２０は端末装置１０からの印刷要求を受け取り、画像形成装置４０に対して印刷要求の対象となった電子文書の印刷指示を行う。それにより、画像形成装置４０は、この電子文書の文書画像を紙等の媒体に印刷するが、その際に、画像形成装置４０は文書画像に加えて符号画像を媒体上に印刷する。
ここでの符号画像とは、識別情報および位置情報を符号化して得られる識別符号および位置符号を画像化したものである。識別情報とは、媒体を一意に特定するための情報であり、本実施の形態では筆跡情報管理装置の一例である識別情報サーバ３０が発行する。また、位置情報は、媒体上の座標位置を特定するための情報であり、本実施の形態では文書サーバ２０が生成する。
そして、文書画像と符号画像とが印刷された媒体に対し、ユーザが筆跡情報生成装置の一例であるデジタルペン６０を用いて筆記(手書き)すると、デジタルペン６０は符号画像に含まれる情報の一例である位置情報に基づいて手書き情報(筆跡情報)を生成する。またそれと同時に、デジタルペン６０は符号画像に含まれる情報の一例である識別情報を認識する。そして、認識された識別情報と筆跡情報とは、情報送信装置(外部装置)の一例である端末装置５０を介して文書サーバ２０に送られる。識別情報と筆跡情報とを受け取った文書サーバ２０は、識別情報に基づいて媒体に印刷された電子文書を特定し、この特定された電子文書と筆跡情報とを関連付けて記憶する。
また、デジタルペン６０には、筆跡情報を生成する代わりに、符号画像に含まれる位置情報と識別情報とを所定情報にリンクするための参照情報とする機能が設定されている。例えば、端末装置５０に対して所定のウェブブラウザプログラムを開いて所定のウェブアドレス等にリンクさせるコマンドを生成させるための情報として位置情報および識別情報を用いる。その場合には、端末装置５０は、位置情報と識別情報とに基づき所定のウェブアドレスにリンクし、所定情報を取得する。
【００１７】
なお、本明細書では、媒体に記録する画像の元となる電子データを「電子文書」と表記するが、これは、テキストを含む「文書」を電子化したデータのみを意味するものではない。例えば、絵、写真、図形等の画像データ(ラスタデータかベクターデータかによらない)、データベース管理ソフトウェアや表計算ソフトウェアで記録されるデータ、その他の印刷可能な電子データも含めて「電子文書」としている。
また、本明細書において、「媒体」は、画像を印刷可能な媒体であれば、その材質は問わない。代表例は紙であるが、ＯＨＰシート等といったプラスチックシートや金属板等であっても構わない。
さらに、本明細書では、電子文書、媒体、さらにはデジタルペン６０やユーザについて、それぞれを一意に識別するための識別情報を用いて処理を行うが、単に「識別情報」という場合には、媒体に関する識別情報を意味するものとする。すなわち、本実施の形態では、媒体に固有に付与される媒体識別情報の一例として、この識別情報を用いる。
【００１８】
続いて、本実施の形態の筆跡情報管理システムを構成する各構成要素について詳細に説明する。
端末装置１０は、文書サーバ２０に対して電子文書の印刷を要求するコンピュータ装置である。ここで、端末装置１０としては、例えば、パーソナルコンピュータやワークステーション、その他のコンピュータが用いられる。
文書サーバ２０は、筆跡情報管理装置の一例であって、電子文書を記憶し管理するコンピュータ装置である。また、端末装置１０から電子文書の印刷要求があると、電子文書の画像と、識別情報および位置情報を表す符号画像とを生成し、これらを合成した合成画像を媒体に印刷する印刷命令を画像形成装置４０に対して出力する。ここで、文書サーバ２０としては、例えば、パーソナルコンピュータやワークステーション、その他のコンピュータが用いられる。
【００１９】
識別情報サーバ３０は、筆跡情報管理装置の一例であって、媒体に付与する識別情報を発行するコンピュータ装置である。そして、発行した識別情報を、その識別情報が付与される媒体に印刷される電子文書と関連付けて記憶する。ここで、識別情報サーバ３０としては、例えば、パーソナルコンピュータやワークステーション、その他のコンピュータが用いられる。
画像形成装置４０は、媒体に画像を印刷し、印刷文書として出力する装置である。この画像形成装置４０は、単体のプリンタや印刷機であってもよいし、他にスキャナや通信の機能を備えた所謂「複合機」であってもよい。ここで、画像形成装置４０における画像形成方式としては、例えば、電子写真方式を用いるとよいが、その他の方式を用いてもよい。
【００２０】
端末装置５０は、印刷文書に対する筆記を電子化した情報(以下、「筆跡情報」という)を、印刷文書に記録された画像の元となる電子文書に反映させるために識別情報サーバ３０に送信するコンピュータ装置である。また、筆跡情報を反映する対象の電子文書をディスプレイ(不図示)に表示し、その上に筆跡情報を重ねて表示するようにしてもよい。ここで、端末装置５０としては、例えば、パーソナルコンピュータやワークステーション、その他のコンピュータが用いられる。なお、本実施の形態では、筆記の内容を電子化した筆跡情報の一例として筆跡情報を用いている。また、筆跡情報を主に手書き情報として説明するが、これに限らず、例えば、建築や機械等の図面データを出力する装置であるプロッタ等によって機械的に描画された情報等を含むものである。
また、端末装置５０は、デジタルペン６０から送られた位置情報と識別情報とに基づいて所定情報にリンクするコンピュータ装置でもある。端末装置５０は、例えば、位置情報および識別情報から所定のウェブブラウザプログラムを開いて所定のウェブアドレス等にリンクさせるコマンドを生成する。そして、位置情報と識別情報とに基づき所定のウェブアドレスにリンクし、所定情報を取得する。
端末装置５０は、デジタルペン６０と例えばＵＳＢ(Universal Serial Bus)ケーブルで接続され、デジタルペン６０との間で通信を行う。そして、デジタルペン６０から識別情報、および筆跡情報または位置情報を取得する。ここで、デジタルペン６０と端末装置５０との間の通信の方式としては、ＵＳＢケーブル等の有線方式の他に、Ｂｌｕｅｔｏｏｔｈ(登録商標)、赤外線通信機能等の無線方式を用いてもよい。
【００２１】
デジタルペン６０は、筆跡情報生成装置の一例であり、印刷文書上に文字または図形を筆記するために用いられるペンデバイスである。また、媒体に印刷された符号画像を読み取る撮像素子を備える。そして、撮像素子で読み取った符号画像から取得される情報の一例である位置情報を検出する。さらには、位置情報から筆記した文字または図形をイメージデータ化した筆跡情報をこの位置情報に基づいて生成し記憶する。また、撮像素子で読み取った符号画像から取得される情報の一例である識別情報を検出し記憶する。
【００２２】
引き続いて、筆跡情報管理システムを構成する各構成要素の詳細を説明する。
まず、文書サーバ２０の構成について説明する。
図２は、文書サーバ２０の機能構成の一例を示したブロック図である。図２に示したように、文書サーバ２０は、受信部２１と、識別情報取得部２２と、電子文書管理部２３と、筆跡情報管理部２４と、文書/筆跡情報記憶部２５とを備える。また、識別符号生成部２７ａと、位置符号生成部２７ｂと、符号配置部２７ｃと、パターン画像記憶部２７ｄと、符号画像生成部２７ｅとを備える。さらに、文書画像生成部２６と、画像合成部２８と、送信部２９とを備える。
【００２３】
受信部２１は、端末装置１０から印刷要求を受信する。ここで、印刷要求には、電子文書に加えて、印刷対象となる電子文書の識別情報(以下、「文書ＩＤ」という)と、印刷される媒体上での電子文書のレイアウトを定めるための各種設定(以下、「印刷設定」という)とが含まれる。文書ＩＤは、端末装置１０にて電子文書毎に付与されるが、文書サーバ２０にて付与してもよい。また、受信部２１は、印刷文書が印刷される媒体に固有に付与される識別情報を識別情報サーバ３０から受信する。さらに、印刷文書に対する筆記が行われた際には、識別情報サーバ３０から、印刷文書に埋め込まれた識別情報と、印刷文書に対する筆記の内容(筆記画像)を電子化した筆跡情報とを受信する。
識別情報取得部２２は、受信部２１から文書ＩＤおよび印刷設定を取得し、これを送信部２９に渡して識別情報の発行要求の送信を指示し、これを文書画像生成部２６に渡して文書画像の生成を指示する。また、受信部２１から媒体の識別情報を取得し、これを識別符号生成部２７ａに渡して識別符号の生成を指示する。
【００２４】
電子文書管理部２３は、受信部２１が受信した識別情報と電子文書とを取得し、文書ＩＤに基づき両者を対応付けて文書/筆跡情報記憶部２５に登録する。また、文書/筆跡情報記憶部２５に記憶された電子文書についての、印刷設定に従って媒体上に印刷された状態を反映した新たな電子文書(第２の電子文書)を生成し、生成された第２の電子文書を文書/筆跡情報記憶部２５に記憶する。さらに、電子文書の表示や印刷が指示された際には、対応する識別情報と電子文書とを、文書/筆跡情報記憶部２５から取り出す。
【００２５】
筆跡情報管理部２４は、受信部２１が受信した識別情報と筆跡情報とを取得し、識別情報に基づき筆跡情報を電子文書に対応付けて文書/筆跡情報記憶部２５に登録する。また、筆跡情報の表示が指示された際には、対応する識別情報と筆跡情報とを、文書/筆跡情報記憶部２５から取り出す。
文書/筆跡情報記憶部２５は、電子文書管理部２３によって管理される電子文書と、筆跡情報管理部２４によって管理される筆跡情報とを記憶する。ここで、本実施の形態では、識別情報と電子文書と筆跡情報とを関連付けて記憶する記憶手段の一例として、文書/筆跡情報記憶部２５を設けている。
【００２６】
識別符号生成部２７ａは、媒体を特定する識別情報を符号化して識別符号を生成する。
位置符号生成部２７ｂは、媒体上の座標位置を示す位置情報を符号化して位置符号を生成する。
符号配置部２７ｃは、識別符号生成部２７ａにて生成された識別符号や、位置符号生成部２７ｂにて生成された位置符号等を所定のレイアウト(後段の図３参照)に従って２次元平面に配置し２次元の符号配列を生成する。
パターン画像記憶部２７ｄは、符号配列に格納される各符号の符号値に対応するパターン画像を記憶する。
符号画像生成部２７ｅは、符号配置部２７ｃが生成した２次元の符号配列を参照し、各符号値に対応したパターン画像を選択して符号画像を生成する。
【００２７】
文書画像生成部２６は、識別情報取得部２２から文書ＩＤおよび印刷設定を取得し、この文書ＩＤで特定される電子文書を文書/筆跡情報記憶部２５から読み出す。そして、印刷設定に従ってその電子文書の文書画像を生成する。
画像合成部２８は、符号画像生成部２７ｅが生成した符号画像と、文書画像生成部２６が生成した文書画像とを合成し、合成画像を生成する。
送信部２９は、識別情報サーバ３０に対して識別情報の発行要求を送信する。また、画像形成装置４０に対して媒体に対する画像の印刷命令を送信する。さらに、筆跡情報の表示が指示された際には、識別情報サーバ３０に対して識別情報と筆跡情報とを送信する。
【００２８】
ここで、本実施の形態の文書サーバ２０で生成される符号画像について説明する。
図３は、符号画像を構成する画像等の一例を示した図である。まず、符号画像を構成する単位パターンについて説明する。図３(ａ)は、単位パターンの一例を示したものである。
単位パターンとは、情報埋め込みの最小単位である。図３(ａ)では、黒塗りの領域と斜線の領域をドット配置可能な領域とし、その間にある白色の領域をドット配置不可能な領域としている。そして、ドット配置可能な領域のうち、黒塗りの領域にドットが配置され、斜線の領域にはドットが配置されていないことを示している。すなわち、図３(ａ)は、ドットを配置可能な９箇所の中から選択した２箇所(黒塗りの領域)にドットを配置することで単位パターンを構成した例を示したものである。ここで、９箇所の中から２箇所を選択する組み合わせは３６(＝９Ｃ２)通りなので、単位パターンは、３６種類存在する。このうち、４種類の単位パターンは、同期パターンとして使用される。同期パターンとは、画像の回転を検出したり、識別符号および位置符号の相対的な位置を特定したりするためのパターンである。特に、画像の回転を検出する必要があることから、４種類の同期パターンとしては、そのうちの１つの同期パターンを９０度回転するとそのうちの別の同期パターンになるようなものが選ばれる。また、この４種類の単位パターンを除く３２種類の単位パターンは、識別符号および位置符号を表現する情報パターンとして使用され、５ビットの情報が表現される。
【００２９】
ところで、図３(ａ)に示したドットは、あくまで情報表現のためのドットであり、画像を構成する最小の点を意味するドットとは必ずしも一致しない。本実施の形態において、情報表現のためのドット(図３(ａ)の最小の四角)は、６００ｄｐｉにおける２ドット×２ドットの大きさを有している。６００ｄｐｉにおける１ドットの大きさは０．０４２３ｍｍなので、情報表現のためのドット(図３(ａ)の最小の四角)の一辺は、８４．６μｍ(＝０．０４２３ｍｍ×２)である。情報表現のためのドットは、大きくなればなるほど目に付きやすくなるため、できるだけ小さいほうが好ましい。ところが、あまり小さくすると、プリンタで印刷できなくなってしまう。そこで、情報表現のためのドットの大きさとして、５０μｍより大きく１００μｍより小さい上記の値を採用している。ただし、上記の値８４．６μｍは、あくまで計算上の数値であり、実際に印刷されたトナー像では１００μｍ程度になる。なお、本明細書で「ドット」というときは、特に明示しない限り、画像を構成する最小の点を意味するドットではなく、情報表現のためのドットを指すものとする。
【００３０】
次に、このような単位パターンから構成される符号ブロックについて説明する。図３(ｂ)に、符号ブロックのレイアウトの一例を示す。なお、ここでは、画像ではなく、パターン画像によって置き換えられる直前の符号配列で示している。すなわち、図３(ｂ)の最小の四角(以下、「単位ブロック」という)に、図３(ａ)のような単位パターン(３６通りの単位パターンのいずれか)が配置され、その画像が媒体に形成されることになる。
図３(ｂ)のレイアウトでは、符号ブロックの左上の１つの単位ブロックに、同期符号が配置されている。また、同期符号が配置された単位ブロックの右側の４つの単位ブロックにＸ位置符号が配置され、同期符号が配置された単位ブロックの下側の４つの単位ブロックにＹ位置符号が配置されている。さらに、これらの位置符号が配置された単位ブロックに囲まれた１６(＝４×４)個の単位ブロックに識別符号が配置されている。
【００３１】
ここで、識別情報の符号化について述べる。
識別情報を符号化する場合、識別情報を構成するビット列は、ＲＳ符号化を行うために複数のブロックに分割される。符号化には、いくつかの方法があるが、本実施の形態では、ＲＳ符号化が適している。ＲＳ符号は多値の符号法であり、この場合、単位ブロックで表現される値がＲＳ符号の多値に対応するからである。例えば、１つの単位ブロックで５ビットの情報を表現する場合、６０ビットの識別情報は、ブロック長が５ビットの１２個のブロックに分割される。そして、２ブロックの誤りを訂正可能なＲＳ符号を採用したとすると、符号長は１６ブロックとなり、図３(ｂ)の符号ブロックにおける識別符号が配置される単位ブロックに収まることになる。なお、符号化方式はＲＳ符号に限定するものでなく、その他の符号化方式、例えば、ＢＣＨ符号等を使用してもよい。
【００３２】
引き続いて、位置情報の符号化について述べる。
位置情報の符号化には、擬似乱数系列の一種であるＭ系列符号が使用される。ここで、Ｍ系列とは、ある長さのシフトレジスタとフィードバックによって生成される符号系列とのうち、その周期が最長になる系列をいう。Ｋをシフトレジスタの段数とすると、Ｍ系列の系列長は２Ｋ−１となる。このＭ系列から取り出した任意の連続したＫビットは、同じＭ系列中の他の位置に現れない性質を持つ。そこで、この性質を利用して位置情報を符号化する。
ところで、本実施の形態では、符号化すべき位置情報の長さから、必要なＭ系列の次数を求め、Ｍ系列を生成している。しかしながら、符号化する位置情報の長さが予め分かっている場合は、Ｍ系列を毎回生成する必要はない。すなわち、固定のＭ系列を予め生成しておき、それをメモリ等に格納しておけばよい。
例えば、系列長８１９１のＭ系列(Ｋ＝１３)を使用したとする。この場合、位置符号も５ビット単位で埋め込むため、系列長８１９１のＭ系列から５ビットずつ取り出してブロック化する。
【００３３】
なお、本明細書では、説明を簡単にするために、識別情報と位置情報とは明確に区別して用いている。しかしながら、広範な位置情報を用意しておき、媒体ごとに異なる範囲から位置情報を切り出して埋め込み、位置情報の違いによって媒体を識別するという手法もある。そこで、このような手法においては、媒体を識別する機能が位置情報に備わっているものと見て、位置情報を識別情報としても考えるものとする。
【００３４】
次に、識別情報サーバ３０の構成について説明する。
図４は、識別情報サーバ３０の機能構成の一例を示したブロック図である。図４に示したように、識別情報サーバ３０は、受信部３１と、識別情報管理部３２と、識別情報記憶部３３と、表示情報生成部３４と、送信部３９とを備える。
受信部３１は、文書サーバ２０から識別情報の発行要求を受信する。また、受信部３１は、印刷文書に対する筆記が行われた際には、媒体の識別情報と筆跡情報とを端末装置５０から受信する。ここで、本実施の形態では、端末装置５０から媒体の識別情報と筆跡情報とを受信し、さらに筆跡情報の表示が指示された際に、文書サーバ２０から媒体の識別情報と筆跡情報とを受信する受信手段の一例として、受信部３１を設けている。
【００３５】
識別情報管理部３２は、識別情報の発行要求があると、識別情報を重複することなく発行し、その際に指定された文書ＩＤおよび印刷設定を識別情報に関連付けて記憶する。また、識別情報の指定を受けて、その識別情報に対応する文書ＩＤおよび印刷設定を取り出す。
識別情報記憶部３３は、識別情報を、その使用/未使用の状態、それが付与された媒体に印刷された電子文書の文書ＩＤ、それが付与された媒体に電子文書が印刷された際の印刷設定を関連付けて記憶するデータベースである。
表示情報生成部３４は、筆跡情報の表示が指示された際に、文書サーバ２０から取得した情報に基づいて、筆跡情報を表示するための表示情報を生成する。この表示情報としては、例えば、端末装置５０で表示するイメージを生成する元となるデータを生成する。
【００３６】
送信部３９は、文書サーバ２０からの要求に応じて発行した識別情報を文書サーバ２０に送信する。また、印刷文書に対する筆記が行われた際には、媒体の識別情報と筆跡情報とを文書サーバ２０に送信する。さらに、筆跡情報の表示が指示された際には、端末装置５０に対して表示情報を送信する。ここで、本実施の形態では、媒体の識別情報と筆跡情報とを送信する送信手段の一例として、送信部３９を設けている。
【００３７】
次に、デジタルペン６０について説明する。
図５は、デジタルペン６０の構成を説明する図である。図５に示したように、デジタルペン６０は、本体筐体６８内部に、媒体に筆記を行うペンチップ６４、ペン全体の動作を制御する制御部６１、媒体上に赤外光を照射する赤外ＬＥＤ６２、媒体からの反射光を検知することによって符号画像を読み取る符号画像読取手段の一例としての赤外ＣＭＯＳ６３、識別情報や筆跡情報や位置情報を記憶する記憶手段の一例としての情報メモリ６５、外部装置と通信する送信手段の一例としての通信部６６を備えている。さらには、デジタルペン６０の各部を駆動するための電力を供給する充電可能なバッテリ６７を備えている。
【００３８】
また、デジタルペン６０は、ユーザが行う各種操作に対応した信号を出力する信号出力手段の一例として、デジタルペン６０にペンチップ６４を保護するためのキャップ６９が装着されているか否かを検知するキャップスイッチＳＷ１、デジタルペン６０による筆記動作等をペンチップ６４に加わる圧力(筆圧)によって検知する筆圧検知スイッチＳＷ２、ユーザ操作によるオン/オフの入力を受け付けるユーザスイッチＳＷ３を備えている。キャップスイッチＳＷ１およびユーザスイッチＳＷ３は本体筐体６８の側面部にそれぞれ設けられ、筆圧検知スイッチＳＷ２は本体筐体６８内部に設けられている。
そして、赤外ＬＥＤ６２、赤外ＣＭＯＳ６３、情報メモリ６５、通信部６６、さらにはキャップスイッチＳＷ１、筆圧検知スイッチＳＷ２、ユーザスイッチＳＷ３は、制御部６１に接続されている。
【００３９】
赤外ＬＥＤ６２は、７００〜１０００μｍの波長の赤外光を出射する１または複数のＬＥＤ(Light Emitting Diode)で構成されている。そして、後述する制御部６１内の照明駆動部６１４から送信される駆動信号に基づいてパルス点灯する。
赤外ＣＭＯＳ６３は、赤外領域に感度があるＣＭＯＳセンサ(Complementary Metal Oxide Semiconductor)であって、撮像した画像を同時に転送できるグローバルシャッタ方式を用いている。そして、赤外ＣＭＯＳ６３は、５０ｆｐｓ〜１００ｆｐｓ(frame per second)程度の周期(フレームレート)で送信される画像取込信号に同期して、媒体に印刷された符号画像を撮像する。画像取込信号は、後述する制御部６１内の画像取込信号生成部６１５にて生成され、赤外ＣＭＯＳ６３に送信される。
通信部６６は、端末装置５０と通信を行い、識別情報と、筆跡情報または位置情報とを端末装置５０に送信する。また、端末装置５０から画像取込タイミング信号を受信し、制御部６１内の出力部６１３から端末装置５０に送られる識別情報と、筆跡情報または位置情報との送信タイミングを制御する。
【００４０】
次に、デジタルペン６０に設けられた制御部６１について説明する。
図６は、制御部６１の機能構成の一例を示したブロック図である。図６に示したように、制御部６１は、赤外ＣＭＯＳ６３にて読み取った符号画像を処理する画像処理部６１１、画像処理部６１１での処理結果から識別情報および位置情報を取得し、さらには筆跡情報を生成するデータ処理部６１２、データ処理部６１２にて取得・生成された識別情報と筆跡情報または位置情報とを情報メモリ６５または通信部６６に出力する出力部６１３、赤外ＬＥＤ６２を駆動する照明駆動部６１４、赤外ＣＭＯＳ６３に送信する所定周期の画像取込信号を生成する画像取込信号生成部６１５、各部の動作を制御する動作制御部６１６、ペンの識別情報(ペンＩＤ)を記憶するペンＩＤメモリ６１７を備えている。
ここで、画像処理部６１１およびデータ処理部６１２は、媒体に印刷された符号画像から所定の情報を取得する情報取得手段として機能する。
【００４１】
画像処理部６１１には、画像取得部６１１ａと、ドット配列生成部６１１ｂとが備えられる。
画像取得部６１１ａは、赤外ＣＭＯＳ６３により印刷文書から読み取られた符号画像を取得する。また、必要に応じて、符号画像に含まれるノイズを除去する。
ドット配列生成部６１１ｂは、符号画像におけるドットの位置を参照して、ドット配列を生成する。すなわち、２次元の配列上で、例えば、ドットがある位置に「１」を、ドットがない位置に「０」を記憶することにより、画像として検出したドットをデジタルデータに置き換える。そして、この２次元の配列をドット配列として出力する。
【００４２】
データ処理部６１２には、符号配列生成部６１２ａと、識別情報取得部６１２ｂと、位置情報取得部６１２ｃと、筆跡情報生成部６１２ｄとが備えられる。
符号配列生成部６１２ａは、ドット配列上で、符号ブロック内の単位パターンに対応するブロックを検出する。具体的には、単位パターンが配置されるブロックと同じ形状および大きさの枠をドット配列上で動かし、枠内のドット数が均等になる位置で枠を固定する。例えば、図３(ａ)の単位パターンを用いる場合であれば、３ドット×３ドットに対応する大きさの枠を動かし、枠内に含まれるドット数が２となる位置で枠を固定する。そして、その枠で区切られた各ブロック内のドット位置から定まる符号値を格納した符号配列を生成する。また、この符号配列が生成されると、予め定められた同期符号の符号値を検索することによって、同期符号の位置が特定される。
【００４３】
識別情報取得部６１２ｂは、符号配列から同期符号の位置を基準にして識別符号を検出する。そして、画像生成時にＲＳ符号化処理で用いたパラメータを用いて識別符号を復号し、識別情報を取得する。
位置情報取得部６１２ｃは、符号配列から同期符号の位置を基準にして位置符号を検出する。そして、位置符号からＭ系列の部分系列を取り出し、画像生成時に使用したＭ系列におけるこの部分系列の位置を参照し、この位置を同期符号によるオフセットで補正した値を位置情報として取得する。なお、オフセットで補正するのは、位置符号の間に同期符号が配置されているためである。
筆跡情報生成部６１２ｄは、筆跡情報生成手段の一例であって、位置情報取得部６１２ｃが取得した位置情報を連結した筆跡情報を生成する。ここでの筆跡情報とは、ペンチップ６４による筆記(手書き)が行われた際のペンチップ６４先端の軌跡を連結して電子化したデータである。
【００４４】
ところで、デジタルペン６０には、異なる複数の動作モードを使い分けて使用できる機能が設定されている。例えば、本実施の形態のデジタルペン６０では、ペンチップ６４により媒体上に描かれた筆記画像を筆跡情報として端末装置５０に送信する動作モードである「筆記モード」と、媒体から得られた識別情報および位置情報の一方または双方を特定の情報にリンクするための参照情報として用いる動作モードとしての「参照モード」とが設定される。「参照モード」での動作例としては、端末装置５０に対して例えば所定のウェブブラウザプログラムを開いて特定情報が保存・記述されたウェブアドレス等にリンクさせるコマンドを生成させるための参照情報として、位置情報取得部６１２ｃにて取得した位置情報および識別情報取得部６１２ｂにて取得された識別情報を用いる。なお、「参照モード」において、位置情報および識別情報のいずれか一方だけを用いるように構成してもよい。
【００４５】
デジタルペン６０における「筆記モード」や「参照モード」等の動作モードは、ユーザの操作に対応した信号(オン/オフ信号)を出力するキャップスイッチＳＷ１、筆圧検知スイッチＳＷ２およびユーザスイッチＳＷ３のオン/オフ状態に基づき、動作制御部６１６が設定する。そして、動作制御部６１６は、データ処理部６１２に対して、「筆記モード」または「参照モード」の設定を指示する制御信号を送る。
【００４６】
そして、筆跡情報生成部６１２ｄは、動作制御部６１６からの「筆記モード」の設定を指示する制御信号により動作する。それにより、「筆記モード」では、識別情報取得部６１２ｂにて取得された識別情報と、筆跡情報生成部６１２ｄにて生成された筆跡情報とが出力部６１３に送られる。
それに対して、動作制御部６１６からの制御信号にて「参照モード」が設定されている場合には、筆跡情報生成部６１２ｄは機能を停止する。それにより、「参照モード」では、識別情報取得部６１２ｂにて取得された識別情報と、位置情報取得部６１２ｃが取得した位置情報とが出力部６１３に出力される。
なお、「筆記モード」および「参照モード」の双方において筆跡情報生成部６１２ｄを動作させ、位置情報から筆跡情報を生成してもよい。その際には、「筆記モード」が設定されている場合には筆跡情報はペンチップ６４先端の軌跡を連結した筆跡情報としてそのまま使用される。また、「参照モード」が設定されている場合には筆跡情報は参照情報として使用される。
【００４７】
また、データ処理部６１２は、動作制御部６１６にて設定された「筆記モード」および「参照モード」に対応させて、データ処理部６１２にて生成する識別情報、位置情報、および筆跡情報の一または複数に、「筆記モード」または「参照モード」にて生成されたことを示す「動作モード情報」を付加する(後段の図１０参照)。それにより、動作モード情報が付加された識別情報や位置情報や筆跡情報を取得した端末装置５０では、動作モード情報に基づき、媒体上の本来筆記できない領域での筆記や、参照情報となる位置情報が印刷されていない領域での符号画像の読み取り等といった不都合動作が行われたことが認識される。そして、端末装置５０からデジタルペン６０に対して、送信された識別情報や位置情報や筆跡情報は不都合動作に基づくものであり、筆記情報または参照情報として使用できないことを通知する。
さらに、データ処理部６１２は、識別情報取得部６１２ｂにて識別情報を取得する際に発生したエラー情報、位置情報取得部６１２ｃにて位置情報を取得する際に発生したエラー情報、筆跡情報生成部６１２ｄにて筆跡情報を生成する際に発生したエラー情報を識別情報や位置情報や筆跡情報に付加する(後段の図１０参照)。それにより、エラー情報が付加された識別情報や位置情報や筆跡情報を取得した端末装置５０では、これらの情報の取得処理時や生成処理時にエラーが発生したことが認識される。そして、端末装置５０は、ユーザに対して、エラー通知や、個々のエラーに対する対応策を指示する。
【００４８】
出力部６１３は、出力手段の一例であって、識別情報と、筆跡情報または位置情報とを情報メモリ６５または通信部６６に出力する。すなわち、通信部６６と端末装置５０との間の通信が確立されている場合には、出力部６１３は識別情報と、筆跡情報または位置情報とを通信部６６に出力する。一方、通信部６６と端末装置５０との間の通信が確立されていない場合には、出力部６１３は識別情報と、筆跡情報または位置情報とを情報メモリ６５に出力する。情報メモリ６５では、取得した識別情報と、筆跡情報または位置情報とを記憶する。
また出力部６１３は、通信部６６と端末装置５０との間の通信が確立された際に、情報メモリ６５から識別情報および筆跡情報を読み出し、通信部６６に出力する。
なお、出力部６１３は、識別情報と、筆跡情報または位置情報とのいずれか一方を情報メモリ６５または通信部６６に出力するように構成してもよい。
【００４９】
画像取込信号生成部６１５は、例えば５０ｆｐｓ〜１００ｆｐｓの周期(フレームレート)の画像取込信号を生成して、赤外ＣＭＯＳ６３に送信する。赤外ＣＭＯＳ６３では、送信される画像取込信号により設定されるフレームレートで媒体に印刷された符号画像を順次撮像する。さらに、画像取込信号生成部６１５は、生成した画像取込信号を照明駆動部６１４に送信する。
照明駆動部６１４は、赤外ＬＥＤ６２を駆動するための駆動信号を生成し、赤外ＬＥＤ６２をパルス点灯させる。その際には、赤外ＣＭＯＳ６３でのフレームレートに対応させるため、画像取込信号生成部６１５にて生成される画像取込信号に同期させて駆動信号を出力する。それにより、赤外ＬＥＤ６２における消費電力の低減を図っている。
【００５０】
デジタルペン６０では、まず、照明駆動部６１４にて駆動される赤外ＬＥＤ６２が媒体に対して赤外光を照射すると、画像取込信号生成部６１５からの画像取込信号に同期して赤外ＣＭＯＳ６３がその反射光を受光し、媒体に印刷された符号画像を読み取る。そして、赤外ＣＭＯＳ６３にて読み取られた符号画像は、制御部６１内の画像処理部６１１に送られる。
画像処理部６１１では、画像取得部６１１ａがこの読み取った符号画像を取得する。その際に、符号画像にノイズが含まれていれば、これを除去する。引き続いて、ドット配列生成部６１１ｂが、符号画像に含まれるドット位置をデジタルデータ化し、ドット配列を生成する。そして、生成されたドット配列はデータ処理部６１２に送られる。
【００５１】
次のデータ処理部６１２では、符号配列生成部６１２ａが、ドット配列からブロックを検出し、ブロックごとの符号値を格納した符号配列を生成する。そして、符号配列において、同期符号の位置を特定する。その後、識別情報取得部６１２ｂが、同期符号の位置に基づいて識別符号を検出し、これを復号して識別情報を取得する。識別情報取得部６１２ｂにて取得された識別情報は、出力部６１３に送られる。
また、位置情報取得部６１２ｃが、同期符号の位置に基づいて位置符号を検出し、これを復号して位置情報を取得する。そして、「筆記モード」が設定されている場合には、位置情報取得部６１２ｃにて取得された位置情報は、筆跡情報生成部６１２ｄに送られ、筆跡情報生成部６１２ｄが、位置情報を連結して筆跡情報を生成する。筆跡情報生成部６１２ｄにて生成された筆跡情報は、出力部６１３に送られる。一方、「参照モード」が設定されている場合には、位置情報取得部６１２ｃにて取得された位置情報は、そのまま出力部６１３に送られる。
【００５２】
出力部６１３は、上記したように、通信部６６と端末装置５０との間の通信が確立されている場合には、出力部６１３は識別情報と、筆跡情報または位置情報とを通信部６６に出力する。一方、通信部６６と端末装置５０との間の通信が確立されていない場合には、出力部６１３は識別情報と、筆跡情報または位置情報とを情報メモリ６５に出力する。情報メモリ６５は、出力部６１３から送られた識別情報と、筆跡情報または位置情報とを記憶する。それにより、通信が不調でも、識別情報、および筆跡情報または位置情報が失われない。
【００５３】
続いて、通信部６６から端末装置５０への識別情報および筆跡情報等の送信について説明する。
上記したように、赤外ＣＭＯＳ６３は、画像取込信号生成部６１５からの画像取込信号によって設定された所定のフレームレートで、媒体に印刷された符号画像を順次撮像する。そして、１フレームレート毎に撮像された１フレーム毎の符号画像を撮像順に制御部６１に送る。すなわち、１フレーム毎の符号画像を所定のデータ長からなるデータ群として制御部６１に送る。制御部６１では、画像処理部６１１およびデータ処理部６１２において、１フレーム毎の符号画像から識別情報および位置情報を取得する。したがって、画像処理部６１１およびデータ処理部６１２では、識別情報および位置情報は所定のデータ長からなるデータ群として取得される。また、「筆記モード」が設定されている場合には、筆跡情報を生成する。ここでも、筆跡情報は所定のデータ長からなるデータ群として生成される。
データ処理部６１２は、取得・生成された識別情報および筆跡情報等をフレーム(所定のデータ長からなるデータ群)単位で出力部６１３に送る。そして、識別情報および筆跡情報等は、通信部６６から端末装置５０に向けてフレーム単位で送信される。
【００５４】
ところが、通信部６６から端末装置５０へのフレーム送信時に、例えば端末装置５０が大量の情報を処理する必要のある作業を実行中である場合がある。その場合には、端末装置５０の情報処理部(不図示)には大きな負荷が生じているため、端末装置５０がデジタルペン６０から識別情報および筆跡情報等(フレーム)を受信した場合に、送信されたフレームの中にはフレーム内に含まれるすべての識別情報および筆跡情報等が受信されていないフレームが発生する場合がある。
図７は、フレーム内の一部の識別情報および筆跡情報等が受信されない状況を説明する図である。図７では、データ処理部６１２において識別情報および筆跡情報等からなるデータがフレームＡ,フレームＢ,フレームＣの順で生成され、出力部６１３に送信されるものとする。出力部６１３に送信されたフレームＡ,フレームＢ,フレームＣは、順に通信部６６に送られ、通信部６６内に設けられた例えばＦＩＦＯ(First In First Out) バッファに格納される。そして、ＦＩＦＯバッファに格納されたデータは入力順、すなわちフレームＡ,フレームＢ,フレームＣの順で端末装置５０に出力されることとなる。
【００５５】
しかし、例えばフレームＢを出力部６１３から通信部６６に送信する時に、端末装置５０の情報処理部に大きな負荷が生じたために端末装置５０におけるデータ受信速度が低下し、ＦＩＦＯバッファの空き容量が不足した状態となったとする。すなわち、ＦＩＦＯバッファから端末装置５０に送信されるデータ送信速度が、出力部６１３からＦＩＦＯバッファに受信されるデータ受信速度よりも下回った状態が発生した場合である。
その場合には、ＦＩＦＯバッファにフレームＢのすべてのデータを記憶する容量がないため、通信部６６にフレームＢのデータの一部(斜線部)が受信されない。そして、ＦＩＦＯバッファに空き容量が生じた段階で、通信部６６には次のフレームＣが受信される。それにより、通信部６６に格納されたフレームＢには一部にデータ欠損(斜線部)が生じる。そのため、端末装置５０にはデータ欠損(斜線部)が生じたフレームＢが送信されることとなる。
【００５６】
データ欠損(斜線部)が生じたフレームＢを送信した後、通信部６６は次のフレームＣの送信を行う。その場合に、端末装置５０はフレームＢにデータ欠損が存在することを判別できないため、端末装置５０では、通信部６６からデータ欠損が生じたフレームＢを受信した後、通信部６６からは次に送信されるフレームＣをそのまま受け入れる。それにより、端末装置５０におけるフレームＢに割り当てられた記憶領域には、データ欠損が生じた領域(斜線部)にフレームＣの一部が記憶されることとなる。その結果、フレームＢの記憶領域には、本来割り当てられるフレームＢのデータとは異なり、フレームＢのデータとフレームＣのデータとが混在して記憶される。同様に、端末装置５０におけるフレームＣに割り当てられる記憶領域においても、本来のフレームＣのデータとは異なり、フレームＣのデータとその次に送信されるフレームのデータとが混在して記憶される。このような各フレームに割り当てられる記憶領域でのデータの混在した状態は、その後に送られるフレームにも連鎖的に生じる。そのために、端末装置５０が取得する識別情報および筆跡情報等はデジタルペン６０で取得・生成したものとは異なるエラー情報となる。
【００５７】
そこで、本実施の形態の通信部６６は、端末装置５０において生成された送信要求信号の一例としての画像取込タイミング信号を端末装置５０から受信する。そして、画像取込タイミング信号に基づき、制御部６１内の出力部６１３からの識別情報および筆跡情報等の送信タイミングを制御する。すなわち、通信部６６は、端末装置５０から画像取込タイミング信号を受信するのに同期させて、各フレーム毎にフレームの先頭のデータから送信するように制御している。
具体的には、端末装置５０は、通信部６６に対して所定のインターバルで画像取込タイミング信号を送信する。その際のインターバルは、赤外ＣＭＯＳ６３にて設定されるフレームレートに対応させて設定される。そして、通信部６６は端末装置５０からの画像取込タイミング信号に同期させて、通信部６６内の例えばＦＩＦＯバッファに格納されたフレームＡ,フレームＢ,フレームＣを入力順に、各フレームの先頭のデータから端末装置５０に出力する。
【００５８】
図８は、通信部６６が端末装置５０からの画像取込タイミング信号に同期させてフレーム毎に識別情報および筆跡情報等を送信する状態を説明する図である。
図８に示したように、本実施の形態の通信部６６では、上記した理由から例えばデータ欠損(斜線部)が生じているフレームＢが送信される場合にも、フレームＢは、端末装置５０からの画像取込タイミング信号に同期して、フレームＢの先頭のデータから端末装置５０に送信される。また、次のデータ欠損が存在しないフレームＣにおいても、端末装置５０からの画像取込タイミング信号に同期して、フレームＣの先頭のデータから端末装置５０に送信される。
【００５９】
そのため、端末装置５０においては、端末装置５０自身が画像取込タイミング信号をデジタルペン６０に送信した直後に通信部６６から受信する識別情報および筆跡情報等に関するデータは、各フレームの先頭のデータから順に送信されることとなる。それにより、端末装置５０における各フレームに割り当てられた記憶領域には、必ず各フレームのデータが先頭から順に記憶され、デジタルペン６０にて生成されたフレーム毎のデータだけが収容される。すなわち、各フレームに割り当てられた記憶領域に、上記のような２つのフレームに跨るデータの混在が生じない。
その際に、例えばフレームＢには通信部６６でデータ欠損が生じているため、端末装置５０におけるフレームＢに割り当てられた記憶領域には、デジタルペン６０で取得・生成したフレームＢの識別情報および筆跡情報等を正確に表していないエラーデータが割り当てられる。しかし、端末装置５０でのフレームＢの異常は、その次に送られるフレームＣ以降のフレームには影響が及ばない。そのため、端末装置５０には、フレームＢ以外のフレームに含まれるデータにより、デジタルペン６０で取得・生成した識別情報および筆跡情報等が正確に記憶される。
【００６０】
ここで図９は、通信部６６における画像取込タイミング信号の受信タイミングと、それに同期する各フレームの送信タイミングとを説明するシーケンス図である。
図９に示したように、フレームＡ,フレームＢ,フレームＣ,フレームＤのそれぞれは、通信部６６への入力順に、画像取込タイミング信号の受信から時間ｔ後に端末装置５０に送信される。この時間ｔは、例えば出力部６１３から通信部６６に各フレームの先頭のデータが入力されるまでの時間である。すなわち、通信部６６は、画像取込タイミング信号の受信後、各フレームの先頭データの入力をトリガとしてフレームの送信を開始する。
その際に、フレームＢにはデータ欠損が生じているため、フレームＢのデータ長はフレームＡおよびフレームＣのデータ長よりも短い。しかし、各フレームは、画像取込タイミング信号の受信に同期して送信されるため、フレームＢの次に送信されるフレームＣは、フレームＢのデータ長に影響を受けることなく、画像取込タイミング信号の受信後に送信される。
それにより、フレームにデータ欠損が生じているか否かに拘わらず、端末装置５０における各フレームに割り当てられた記憶領域には、各フレームのデータが先頭から順に記憶される。そのため、一のフレームに生じたデータ欠損が他の正常なフレーム(データ)をもエラーデータとすることが抑制され、データのエラー発生頻度が低減される。
なお、各フレームの先頭のデータは、例えば各フレームを構成するヘッダ(後段の図１０参照)等により認識される。
【００６１】
ここで、図１０は、制御部６１が端末装置５０からの画像取込タイミング信号に同期させて端末装置５０にフレームを送信する際の処理の手順の一例を示したフローチャートである。
図１０に示したように、制御部６１は、データ処理部６１２において識別情報および筆跡情報等からなるデータのフレーム単位での生成を開始する(ステップ１１)。そして、生成したフレーム単位のデータを出力部６１３に送信し、生成順に通信部６６に送る。
制御部６１は、通信部６６に対して端末装置５０から送信される画像取込タイミング信号の待ち受けを指示する。そして、端末装置５０からの画像取込タイミング信号を受けた後(ステップ１２)、通信部６６に対してフレームの先頭のデータの入力の待ち受けを指示する。すなわち、フレームのデータの立ち上がりの待ち受けを指示する。
そして、画像取込タイミング信号を受けた後のフレームの先頭のデータの入力があった時点で(ステップ１３)、１フレーム分のデータを先頭のデータから順に端末装置５０に送信する(ステップ１４)。１フレーム分のデータを送信した後には、次の画像取込タイミング信号を待ち受ける。
【００６２】
このように、本実施の形態のデジタルペン６０では、通信部６６が端末装置５０からの画像取込タイミング信号に同期させてフレーム毎に識別情報および筆跡情報等を送信する。そのため、一のフレームに生じたデータ欠損等のエラーが他のフレームに影響することが抑制され、端末装置５０へのデータ送信時におけるエラー発生頻度が低減される。それにより、デジタルペン６０からのデータを受信する端末装置５０での識別情報および筆跡情報等に関するデータの信頼性の低下が抑制される。
【００６３】
次に、通信部６６が端末装置５０にフレーム毎に識別情報および筆跡情報等を送信する際に通信異常が発生した場合に、デジタルペン６０および端末装置５０が行う処理について述べる。
まず図１１(ａ)は、通信部６６から端末装置５０に送信されるフレームのデータ構造を示し、図１１(ｂ)は、フレームを構成する各バイトに記述されるデータ内容を示した図である。
図１１(ａ)に示したように、各フレームにおいては、Ｂｙｔｅ_０にヘッダ領域、Ｂｙｔｅ_１に動作モード情報領域、Ｂｙｔｅ_２にデコードエラー情報領域、Ｂｙｔｅ_３〜Ｂｙｔｅ_ｍにデータフィールド、ｃｈｅｃｋｓｕｍにバイト総数情報領域がそれぞれ割り振られている。
また、図１１(ｂ)に示したように、Ｂｙｔｅ_０には、各フレームを識別する識別情報(フレームＩＤ)と、フレームに含まれるバイト数(Ｂｙｔｅ_０〜Ｂｙｔｅ_ｍの数)に関する情報とが記述される。Ｂｙｔｅ_１には、デジタルペン６０に設定された動作モードが「筆記モード」および「参照モード」の何れであるかを表す動作モード情報として、キャップスイッチＳＷ１のオン/オフ状態に関する情報、筆圧検知スイッチＳＷ２のオン/オフ状態に関する情報、およびユーザスイッチＳＷ３のオン/オフ状態に関する情報が記述される。また、Ｂｙｔｅ_２には、データ処理部６１２において発生したデータ処理に関するエラー情報、Ｂｙｔｅ_３〜Ｂｙｔｅ_ｍには、データ処理部６１２において取得/生成した識別情報や位置情報や筆跡情報が記述される。また、ｃｈｅｃｋｓｕｍには、デジタルペン６０にて算出された各フレームに含まれるバイト総数に関する情報が記述される。
【００６４】
そして、図１１に示した構造のフレームを端末装置５０が受信した場合に、端末装置５０は例えばフレームのデータ長に基づいて、通信が正常に行われたかを判定する。すなわち、端末装置５０は、受信したフレームのヘッダ(Ｂｙｔｅ_０)に記述されたバイト数に関する情報からバイト数を認識する。そして、受信したフレームの数を加算し、その結果である加算バイト数に「１」を加えた数がｃｈｅｃｋｓｕｍに記述されたバイト総数と一致した場合には、フレームに含まれるすべてのデータが送信されたとして、通信は正常に行われたと判定する。そして、その場合には、端末装置５０はデジタルペン６０に対して通信が正常に行われたことを示す信号(Ａｃｋ信号)を送信する。
一方、加算バイト数に「１」を加えた数がｃｈｅｃｋｓｕｍに記述されたバイト総数と一致しない場合には、フレームに含まれるすべてのデータが送信されていないとして、通信異常が発生したと判定する。そして、その場合には、端末装置５０はデジタルペン６０に対して通信異常が発生したことを示す信号(Ｎａｃｋ信号)を送信する。
【００６５】
例えば、図８に示したフレームＢは通信部６６でデータ欠損が生じているため、端末装置５０は、フレームＢに含まれるすべてのデータが送信されていないとして、通信異常が発生したと判定する。その場合には、端末装置５０は、受信したフレームＢを破棄するように設定してもよい。その際に、端末装置５０は、通信異常が発生したことを判定するまでの時間のマージン分を設定して、画像取込タイミング信号の送信タイミングを遅らせる。そのため、フレームＢの送信の後の次の画像取込タイミング信号の送信は、フレームＣが通信部６６に送信された後となる。それにより、フレームＣは通信部６６で破棄され、フレームＣの次のフレームＤから再度画像取込タイミング信号に同期して、端末装置５０に送信される。
【００６６】
図１２は、フレームＢにて通信異常の発生を判定したことにより画像取込タイミング信号の送信タイミングを遅らせる場合を説明するシーケンス図である。図１２に示したように、通信異常の発生の判定時間を設けるために、フレームＢの送信の後の次の画像取込タイミング信号の送信は遅れて送信される。それにより、フレームＢの送信の後の次の画像取込タイミング信号に同期して送信されるのは、フレームＤとなる。すなわち、図１０の処理フローのステップ１２において、フレームＢの送信の後の次の画像取込タイミング信号の受信の後に、ステップ１３のフレームの先頭のデータの入力が検出されるのはフレームＤである。そのため、フレームＣはスキップされて、フレームＢの次にフレームＤが送信される。その場合に、フレームＣはデジタルペン６０の通信部６６で破棄される。
そして、フレームＢの送信の後の次の画像取込タイミング信号が送信された後、フレームＤの先頭のデータの入力が検出された時点で、フレームＤが通信部６６から端末装置５０に送信される。すなわち、フレームＤの先頭のデータが通信部６６に入力される、画像取込タイミング信号の受信から時間ｔ´後に、フレームＤが通信部６６から端末装置５０に送信される。
【００６７】
ここで、図１３は、端末装置５０がデジタルペン６０の通信部６６からフレームを受信する際の処理の手順の一例を示したフローチャートである。
図１３に示したように、端末装置５０では、まずデジタルペン６０の通信部６６に画像取込タイミング信号を送信する(ステップ２１)。そして、画像取込タイミング信号の送信と同時に、フレームの受信を終了するまでの時間の計測を開始する(ステップ２２)。その後、通信部６６からフレームの送信があると、フレームを受信する(ステップ２３)。
続いて、例えば上記した受信したフレームのバイト数に基づき、１フレームに含まれるすべてのデータが正常に受信されたか否かを判定する(ステップ２４)。その結果、１フレーム分のデータの受信が正常に行われたと判定された場合には、ステップ２２で開始した時間計測を終了する(ステップ２５)。そして、フレームを記憶領域に記憶する(ステップ２６)。
【００６８】
一方、ステップ２４にて１フレームに含まれるすべてのデータが正常に受信されていないと判定された場合には、ステップ２２にて計測が開始された時間が所定時間を経過するまで、１フレーム分のデータが正常に受信されるのを待つ(ステップ２７)。その結果、１フレーム分のデータの受信が正常に行われたと判定された場合には(ステップ２４)、ステップ２２で開始した時間計測を終了する(ステップ２５)。そして、フレームを記憶領域に記憶する(ステップ２６)。
それに対して、ステップ２２にて計測が開始された時間が所定時間を経過するまでに、１フレーム分のデータが正常に受信されない場合には(ステップ２７)、フレームの受信を中断する(ステップ２８)。すなわち、画像取込タイミング信号の送信を遅らせる。そして、受信したデータを破棄する(ステップ２９)。図１２のフレームＢがこの場合に相当する。
【００６９】
ここで、通信部６６と端末装置５０との間の通信異常の判定の説明に戻るとする。通信異常の判定に関しては、デジタルペン６０において通信が正常に行われたかを判定してもよい。例えば、デジタルペン６０がフレームを送信した後、所定時間(例えば、３０秒)内にフレームを受信した旨の通知を端末装置５０から受信しない場合に、通信異常が発生したと判定してもよい。例えば、端末装置５０からデジタルペン６０に対して、所定時間内に上記の通信が正常に行われたことを示すＡｃｋ信号、および通信異常が発生したことを示すＮａｃｋ信号の何れも受信しない場合に、デジタルペン６０は通信異常が発生したと判定する。
【００７０】
さらには、デジタルペン６０から端末装置５０に対してフレームの送信を開始した後に、通信部６６と端末装置５０との間の通信が切断された場合に、デジタルペン６０および端末装置５０の双方にて通信異常が発生したと判定してもよい。この場合には、デジタルペン６０では、所定時間の経過の後に電力消費を低減した休止状態が設定される。なお、休止状態が設定された場合には、デジタルペン６０は、例えばユーザがユーザスイッチＳＷ３をオンすることで動作状態に復帰する。
【００７１】
そして、端末装置５０またはデジタルペン６０において通信異常が発生したと判定された場合には、デジタルペン６０は端末装置５０に対してフレームの再度の送信(再送)を試みる。
再送の結果、通信が正常に行われた場合には、端末装置５０およびデジタルペン６０はフレームの送信を完了する。その場合に、端末装置５０は、受信したフレームのヘッダ(Ｂｙｔｅ_０)に記述されたフレームＩＤにより再送されたフレームであることを認識し、そのフレームに割り当てられた所定の記憶領域にデータを記憶する。
一方、再送を所定の回数(例えば、１０回)繰り返した結果、通信が正常に行われない場合には、端末装置５０およびデジタルペン６０は再送エラー(リトライエラー)が発生したものと判定する。
リトライエラーが発生したと判定した場合には、デジタルペン６０は通信部６６を待機状態に設定し、端末装置５０との通信を行わないように設定する。
通信部６６の待機状態は、例えばユーザがユーザスイッチＳＷ３をオンすることで解除される。通信部６６での待機状態が解除されると、通信部６６から端末装置５０へのデータ送信が許可される。
【００７２】
このように、本実施の形態のデジタルペン６０では、通信部６６が端末装置５０からの画像取込タイミング信号に同期させてフレーム毎に識別情報および筆跡情報等を送信するに際して、通信異常の発生を検知し、通信異常を検知した場合にはフレームの再度の送信を行う。それにより、デジタルペン６０から端末装置５０へのデータ送信の確実性が高まる。
なお、リトライエラーが発生したと判定された場合には、端末装置５０とデジタルペン６０とがＵＳＢケーブル等の有線接続されている場合等に、ＵＳＢケーブル等が断線していることも想定される。そのため、端末装置５０は、リトライエラーが発生したと判定された場合に例えば表示部(不図示)に通信異常が発生した旨の表示を行ってもよい。一方、デジタルペン６０では、通信異常が発生したために通信されなかった旨の情報をフレームに付加して、情報メモリ６５に記憶するように設定してもよい。さらには、それとともに、デジタルペン６０の動作を停止するよう設定してもよい。
【００７３】
次に、図１４は、デジタルペン６０の制御部６１のハードウェア構成を示した図である。
図１４に示したように、制御部６１は、機能モジュールとして、デジタルペン６０の動作制御を行うに際して予め定められた動作制御プログラム(ファームウェア)に従ってデジタル演算処理を実行するＣＰＵ１０１、ＣＰＵ１０１により実行される処理プログラム等が格納されるＲＡＭ１０２、ＣＰＵ１０１により実行される処理プログラム等にて用いられる設定値等のデータが格納されるＲＯＭ１０３、書き換え可能で電源供給が途絶えた場合にもデータを保持できるＥＥＲＯＭやフラッシュメモリ等の不揮発性メモリ１０４、制御部６１に接続される各部との信号の入出力を制御するインターフェース部１０５を備えている。
また、外部記憶装置１０６には、制御部６１により実行される動作制御プログラムが格納されており、制御部６１がこの動作制御プログラムを読み込むことによって、デジタルペン６０に関する動作制御が実行される。
【００７４】
すなわち、上記した画像処理部６１１、データ処理部６１２、出力部６１３、動作制御部６１６の各機能を実現する動作制御プログラムを外部記憶装置１０６から制御部６１内のＲＡＭ１０２に読み込む。そして、ＲＡＭ１０２に読み込まれた動作制御プログラムに基づいて、ＣＰＵ１０１が各種処理を行う。この動作制御プログラムは、デジタルペン６０と通信する例えば端末装置５０に備えられたハードディスクやＤＶＤ−ＲＯＭ等がデジタルペン６０の外部記憶装置１０６として機能して、端末装置５０から通信回線を介してＲＡＭ１０２にロードされて提供される。また、その他の提供形態として、予めＲＯＭ１０３にインストールされた状態にて提供される形態がある。さらに、デジタルペン６０がアッセンブリされた後に、動作制御プログラムが不揮発性メモリ１０４にインストールされ、不揮発性メモリ１０４からＲＡＭ１０２にロードされる形態がある。また、インターネット等のネットワークを介してデジタルペン６０にプログラムが伝送され、ＲＡＭ１０２にインストールされる形態がある。
【００７５】
ここで、デジタルペン６０の制御部６１では、デジタルペン６０の起動時に、制御部６１を動作させるために必要な最小限である所定の機能モジュールについて故障診断を行う。そして、故障診断にてかかる所定の機能モジュールがすべて正常であると判定された場合に、デジタルペン６０を動作可能に設定する。また、所定の機能モジュールのいずれかに故障を検出した場合には、故障理由に応じて、例えばデジタルペン６０の本体筐体６８に設けた所定のＬＥＤ(不図示)を点灯させる等の表示を行い、ユーザに通知する。
図１５は、制御部６１が行う故障診断処理の手順の一例を示したフローチャートである。図１５に示したように、デジタルペン６０が起動されると、制御部６１では、まず、制御部６１を動作させるために必要な最小限の機能モジュールの１つであるＲＯＭ１０３の故障診断を行う(ステップ３１)。ここでのＲＯＭ１０３の故障診断では、ＲＯＭ１０３内のファームウェア(動作制御プログラム)を書き込むＲＯＭ空間のチェックサム値を予め指定されたアドレスに記憶しておく。そして、デジタルペン６０の起動時に、ＲＯＭ空間をＢｙｔｅ_０から順に２バイト長で加算してその加算値を求める。そして、この加算値と指定されたアドレスに記憶されたチェックサム値とが一致すればＲＯＭ１０３は正常であると判定し、一致しなければ故障が発生したと判定する。
【００７６】
ＲＯＭ１０３が正常であると判定された場合には(ステップ３２)、制御部６１を動作させるために必要な最小限の機能モジュールの１つであるＲＡＭ１０２の故障診断を行う(ステップ３３)。ここでのＲＡＭ１０２の故障診断では、ＲＡＭ１０２内のＲＡＭ空間のすべてにチェックデータを書き込む。そして、書き込んだチェックデータを読み出し、書き込んだチェックデータと一致するかを判定する。読み出したデータが書き込んだチェックデータと一致すればＲＡＭ１０２は正常であると判定し、一致しなければ故障が発生したと判定する。
そして、ＲＡＭ１０２が正常であると判定された場合には(ステップ３４)、制御部６１は正常に動作可能であると判定する(ステップ３５)。そして、制御部６１による動作制御処理を開始する。
【００７７】
一方、ステップ３２にてＲＯＭ１０３に故障が発生したと判定された場合、またはステップ３４にてＲＡＭ１０２に故障が発生したと判定された場合には、例えばデジタルペン６０の本体筐体６８に設けた所定のＬＥＤ(不図示)を点灯させる等の表示を行い、ユーザに通知する(ステップ３６)。
そして、デジタルペン６０の電源スイッチがオフされる(例えば、ユーザスイッチＳＷ３での所定時間に亘るオン設定)のを待って(ステップ３７)、制御部６１を停止させる(ステップ３８)。
このような故障診断を行うことで、制御部６１がハングアップせず、またユーザはデジタルペン６０に故障が生じたことを認識する。
【００７８】
次に、制御部６１の不揮発性メモリ１０４に識別情報と、筆跡情報または位置情報とを記憶する場合について述べる。
不揮発性メモリ１０４は、例えば通信部６６と端末装置５０との間の通信が確立されていない場合に、識別情報と、筆跡情報または位置情報とを記憶する情報メモリ６５として機能する。したがって、デジタルペン６０が端末装置５０から離れて単独の状態で媒体上の符号画像を読み取る場合にも、情報メモリ６５を構成する不揮発性メモリ１０４には、識別情報と、筆跡情報または位置情報とが記憶される。
このようなデジタルペン６０が端末装置５０から離れて単独の状態で使用される場合には、デジタルペン６０はバッテリ６７からの電力供給を受けて動作する。そのため、不揮発性メモリ１０４(情報メモリ６５)にデータを記憶している最中にバッテリ６７の電圧が所定値以下に低下すると、制御部６１のシステムがリセットされる可能性がある。制御部６１がリセットされると、不揮発性メモリ１０４に書き込み中であったデータは、正常な状態で不揮発性メモリ１０４に記憶されたことが保証されない。
【００７９】
そこで、不揮発性メモリ１０４では、データを記憶する領域(データ記憶領域)と、データ記憶領域へのデータ書き込みの状態を記憶する管理領域(データ管理領域)とを設定している。データ管理領域には、例えば、データが正常な状態で記憶されたことを示す情報、またはデータの書き込み途中で書き込み処理が中断したことを示す情報が記憶される。
そして、制御部６１のシステムがリセットされた後に、不揮発性メモリ１０４内のデータ記憶領域に記憶されたデータを読み出す場合には、制御部６１では、データ記憶領域と対をなすデータ管理領域が参照される。そしてデータ管理領域を参照した結果、データ記憶領域から読み出すデータが、書き込み途中で書き込み処理が中断したものであった場合には、そのデータを端末装置５０に送信できないように設定する。また、制御部６１は、ユーザにそのデータを破棄するように通知する。
それにより、不正常なデータが端末装置５０に送信されるのが抑制される。また、不正常なデータが不揮発性メモリ１０４(情報メモリ６５)に記憶されたままの状態が継続されるのを抑え、不揮発性メモリ１０４の記憶容量を効率的に使用する。
【００８０】
続いて、バッテリ６７の電圧と、制御部６１にて設定される動作状態とについて述べる。
上記したように、不揮発性メモリ１０４(情報メモリ６５)にデータを記憶している最中にバッテリ６７の電圧が所定値以下に低下すると、制御部６１のシステムがリセットされる可能性がある。そしてその場合に、不揮発性メモリ１０４に書き込み中であったデータは、正常な状態で不揮発性メモリ１０４に記憶されたことが保証されない。
そのため、制御部６１は、バッテリ６７の電圧を常時モニタし、バッテリ６７の電圧レベルに対応させて、制御部６１の状態を設定する。
【００８１】
例えば、バッテリ６７の電圧が第１の電圧レベル(例えば、３．３Ｖ)以上である場合には、制御部６１には通常の動作が可能である第１の動作状態が設定される。この第１の動作状態では、ユーザは「筆記モード」および「参照モード」での動作と、停止状態とを自由に設定できる。
また、バッテリ６７の電圧が第２の電圧レベル(例えば、３．１Ｖ)以上であって、第１の電圧レベル(例えば、３．３Ｖ)よりも小さい場合には、制御部６１には第２の動作状態が設定される。この第２の動作状態では、デジタルペン６０が動作中である場合には、動作を継続することが可能であるが、一旦停止状態が設定されると、ユーザは次にデジタルペン６０を動作状態に復帰させることができない。
さらに、バッテリ６７の電圧が第２の電圧レベル(例えば、３．１Ｖ)よりも小さい場合には、制御部６１には第３の動作状態が設定される。この第３の動作状態では、デジタルペン６０が動作中である場合には、停止動作に強制的に移行される。また、ユーザは次にデジタルペン６０を動作状態に復帰させることができない。
このように、制御部６１では、バッテリ６７の電圧レベルに対応させて制御部６１の状態を設定することで、不正常な状態で不揮発性メモリ１０４にデータが記憶されることを抑制する。
【００８２】
次に、本実施の形態の筆跡情報管理システムにて電子文書に関して行われる各種処理について説明しておく。
[印刷文書の生成処理]
図１６は、筆跡情報管理システムにて印刷文書が生成される際の動作の一例を示したシーケンス図である。
まず、ユーザは端末装置１０から電子文書の印刷指示を文書サーバ２０に送信する(ステップ１０１)。その際には、端末装置１０は、印刷対象となる電子文書と、電子文書の識別情報(文書ＩＤ)と、ユーザが指定した印刷設定とを送信する。ここで、印刷設定は、印刷の対象とするページ、印刷部数、媒体である用紙のサイズ、拡大縮小率、Ｎアップ (電子文書のＮページを媒体の１ページに割り付ける印刷)、余白領域の大きさ等の設定を含む。
【００８３】
文書サーバ２０は、端末装置１０から電子文書の印刷指示を受信する(ステップ２０１)。印刷指示に含まれる印刷対象となる電子文書は、電子文書管理部２３に送られ、電子文書管理部２３が、電子文書を文書ＩＤと関連付けて文書/筆跡情報記憶部２５に登録する(ステップ２０２)。
また、文書サーバ２０は、印刷を指示された電子文書の文書ＩＤと印刷設定とを識別情報サーバ３０に送信する(ステップ２０３)。ここで、文書ＩＤとしては、例えば、ＵＲＬ(Uniform Resource Locator)を用いるとよいが、電子文書を一意に特定することができるものであれば他の情報を用いてもよい。
それにより、識別情報サーバ３０は、文書ＩＤと印刷設定とを受信する(ステップ３０１)。そして、媒体識別情報を管理する識別情報管理部３２が識別情報記憶部３３から未使用の媒体識別情報を取得する(ステップ３０２)。ここで、取り出す媒体識別情報の数は、印刷設定に応じて決められる。つまり、基本的には、印刷するページ数に印刷部数を乗じて得られる数の媒体識別情報が取り出される。ただし、印刷設定情報の中に、Ｎアップ印刷の指定等がある場合は、それも考慮される。例えば、１０ページの電子文書を２アップ印刷で５部印刷する場合は、２５(＝１０÷２×５)個の媒体識別情報が取り出される。
次に、識別情報サーバ３０は、識別情報と文書ＩＤと印刷設定とを関連付けて識別情報記憶部３３に登録する(ステップ３０３)。そして、識別情報サーバ３０は、文書サーバ２０に対し、識別情報を送信する(ステップ３０４)。
【００８４】
それにより、文書サーバ２０は、識別情報を受信する(ステップ２０４)。そして、識別情報および位置情報を表す符号画像を生成する(ステップ２０５)。
すなわち、文書サーバ２０では、受信部２１が媒体識別情報を受信する。そして、受信部２１は、受信した媒体識別情報を識別情報取得部２２に受け渡す。すると、まず識別情報取得部２２が、取得した媒体識別情報を識別符号生成部２７ａに渡し、識別符号生成部２７ａが、上記した方法を用いて媒体の識別情報を符号化し、識別符号を生成する。
また、位置符号生成部２７ｂは、受信部２１から印刷設定を受け取り、印刷設定に応じた範囲の位置情報を上記した方法を用いて符号化し、位置符号を生成する。
そして、符号配置部２７ｃが、媒体識別符号と位置符号とを所定のレイアウトに従って配置し、これを符号画像生成部２７ｅが、パターン画像記憶部２７ｄに記憶されたパターン画像を用いて画像化することで符号画像を生成する。
【００８５】
その後、文書サーバ２０では、文書画像生成部２６が、電子文書の文書画像を生成する(ステップ２０６)。その際に、文書画像生成部２６は、ステップ２０１で識別情報取得部２２が取得した文書ＩＤを受け取り、文書ＩＤに基づいて印刷対象となる電子文書を文書/筆跡情報記憶部２５から読み出す。また、ステップ２０１で識別情報取得部２２が取得した印刷設定を受け取り、これに基づいて文書画像を生成する。
そして、画像合成部２８は、ステップ２０５で生成された符号画像と、ステップ２０６で生成された文書画像とを合成し、合成画像を生成する(ステップ２０７)。
その後、合成画像は送信部２９に渡され、送信部２９が、合成画像の印刷命令を画像形成装置４０に送信する(ステップ２０８)。ここで、合成画像の印刷命令は、例えば、文書画像の印刷命令の列からなるＰＤＬ(Page Description Language)ファイルに対し、符号画像として印刷する内容をＰＤＬコマンドとして設定したＰＤＬの形式で送信される。
【００８６】
画像形成装置４０は、文書サーバ２０から合成画像(電子文書の文書画像および符号画像)を受信する(ステップ４０１)。そして、画像形成装置４０は、文書画像をＹ(イエロー)、Ｍ(マゼンタ)、Ｃ(シアン) により画像に展開する(ステップ４０２)。次に、文書画像はＣ、Ｍ、Ｙのトナーを用いて、符号画像はＫ(カーボンを含む黒)のトナーを用いて、それぞれ画像形成を行う(ステップ４０３)。
【００８７】
ところで、上述した例では、識別情報サーバ３０は識別情報を発行するだけで、文書サーバ２０が、識別情報を含む符号画像を生成し、画像形成装置４０に画像形成を指示する構成とした。しかしながら、識別情報サーバ３０が、符号画像を生成し、画像形成装置４０に画像形成を指示する構成としてもよい。
また、符号画像を画像形成装置４０で生成する構成を採用してもよい。その場合には、文書サーバ２０または識別情報サーバ３０が、電子文書から生成したＰＤＬに識別情報を付加して画像形成装置４０へ送信し、画像形成装置４０が識別情報を含む符号画像を生成することになる。
【００８８】
また、上記の例では、識別情報と文書ＩＤと印刷設定とが関連付けられて構成されたデータベース(識別情報記憶部３３)を識別情報サーバ３０に置く構成について説明した。これは、かかるデータベースを共有可能な装置(識別情報サーバ３０)に置くことで、複数ユーザへの対応や、サーバのアクセス制御技術を利用した電子文書のセキュリティ確保が可能となるからである。しかしながら、必ずしもこのような構成を採用する必要はなく、端末装置１０や文書サーバ２０に上記のデータベースを置く構成を採用してもよい。
【００８９】
また、上記した画像形成装置４０では、符号画像をＫ(カーボンを含む黒) のトナーを用いて形成するようにした。これは、Ｋのトナーが、Ｃ(シアン)、Ｍ(マゼンタ)、Ｙ(イエロー)のトナーよりも赤外光の吸収量が多く、デジタルペン６０での符号画像の読み取りが容易となるからである。しかしながら、符号画像は、特殊トナーを用いて形成することも可能である。
ここで、特殊トナーとしては、可視光領域(４００ｎｍ〜７００ｎｍ)における最大吸収率が７％以下であり、近赤外領域(８００ｎｍ〜１０００ｎｍ)における吸収率が３０％以上の不可視トナーが例示される。ここで、「可視」および「不可視」は、目視により認識できるかどうかとは関係しない。印刷文書における画像が可視光領域における特定の波長の吸収に起因する発色性の有無により認識できるかどうかで「可視」と「不可視」とを区別している。また、可視光領域における特定の波長の吸収に起因する発色性が若干あるが人間の目で認識し難いものも、「不可視」に含める。
【００９０】
なお、ここでは、電子文書の画像に符号画像を合成して印刷することとしたが、白紙(ノートや付箋等)に符号画像を印刷する構成としてもよい。その場合は、ステップ２０１で受信する印刷要求に文書ＩＤを含めないようにし、ステップ３０３で識別情報と文書ＩＤおよび印刷設定との関連付けを行わないようにし、ステップ２０６における文書画像の生成は実行しないようにすればよい。
【００９１】
[筆跡情報の登録処理]
次に、デジタルペン６０が筆跡情報を生成して文書サーバ２０に登録する際の動作について説明する。
上記したように、デジタルペン６０では、識別情報取得部６１２ｂが識別情報を取得する。また、位置情報取得部６１２ｃが位置情報を取得する。さらに、筆跡情報生成部６１２ｄが位置情報を相互に連結して筆跡情報を生成する。そして、通信部６６が、識別情報および筆跡情報を端末装置５０を介して識別情報サーバ３０へ送信する。そして、識別情報サーバ３０が筆跡情報を文書サーバ２０に登録する。
図１７は、筆跡情報を登録する際の識別情報サーバ３０および文書サーバ２０の動作の一例を示したシーケンス図である。
識別情報サーバ３０では、まず、受信部３１が、デジタルペン６０からの識別情報および筆跡情報を受信する(ステップ３１１)。次に、識別情報および筆跡情報は識別情報管理部３２に渡され、識別情報管理部３２は、渡された識別情報に関連付けられた文書ＩＤを識別情報記憶部３３から取り出す。そして、ステップ３１１で受信した識別情報および筆跡情報の送信先となる文書サーバ２０(文書ＩＤで特定される電子文書が存在する文書サーバ２０)を決定する(ステップ３１２)。なお、識別情報記憶部３３において識別情報に文書ＩＤが関連付けられていなければ、その識別情報は白紙(ノートや付箋)に割り当てられたものであると考えられる。その場合は、白紙に対する筆跡情報を管理する文書サーバ２０を送信先として決定すればよい。
その後、識別情報および筆跡情報は送信部３９に渡され、送信部３９が、ステップ３１２で送信先として決定した文書サーバ２０に対し、識別情報および筆跡情報を送信する(ステップ３１３)。
【００９２】
これにより、文書サーバ２０では、受信部２１が、識別情報および筆跡情報を受信する(ステップ２１１)。そして、受信部２１は、受信した識別情報を筆跡情報管理部２４に渡す。すると、筆跡情報管理部２４は、識別情報と筆跡情報とを対応付けて文書/筆跡情報記憶部２５に記憶する(ステップ２１２)。
【００９３】
以上説明したように、本実施の形態の筆跡情報管理システムに用いるデジタルペン６０では、通信部６６が端末装置５０からの画像取込タイミング信号に同期させてフレーム毎に識別情報および筆跡情報等を送信する。そのため、一のフレームに生じたデータ欠損等のエラーが他のフレームに影響することが抑制され、端末装置５０へのデータ送信時におけるエラー発生頻度が低減される。それにより、デジタルペン６０からのデータを受信する端末装置５０での識別情報および筆跡情報等に関する信頼性の低下が抑制される。
【図面の簡単な説明】
【００９４】
【図１】本実施の形態の筆跡情報管理システムの構成の一例を示した図である。
【図２】文書サーバの機能構成の一例を示したブロック図である。
【図３】符号画像を構成する画像等の一例を示した図である。
【図４】識別情報サーバの機能構成の一例を示したブロック図である。
【図５】デジタルペンの構成の一例を示した図である。
【図６】制御部の機能構成の一例を示したブロック図である。
【図７】フレーム内の一部の識別情報および筆跡情報等が受信されない状況を説明する図である。
【図８】通信部が端末装置からの画像取込タイミング信号に同期させてフレーム毎に識別情報および筆跡情報等を送信する状態を説明する図である。
【図９】通信部における画像取込タイミング信号の受信タイミングと、それに同期する各フレームの送信タイミングとを説明するシーケンス図である。
【図１０】制御部が端末装置からの画像取込タイミング信号に応じてフレームを端末装置に送信する際の処理の手順の一例を示したフローチャートである。
【図１１】(ａ)は、通信部から端末装置に送信されるフレームのデータ構造を示し、 (ｂ)は、フレームを構成する各バイトに記述されるデータ内容を示した図である。
【図１２】通信異常の発生によりフレームＢを破棄したことによる画像取込タイミング信号の送信タイミングを遅らせる場合を説明するシーケンス図である。
【図１３】端末装置がデジタルペンの通信部からフレームを受信する際の処理の手順の一例を示したフローチャートである。
【図１４】デジタルペンの制御部のハードウェア構成を示した図である。
【図１５】制御部が行う故障診断処理の手順の一例を示したフローチャートである。
【図１６】筆跡情報管理システムにて印刷文書が生成される際の動作の一例を示したシーケンス図である。
【図１７】筆跡情報を登録する際の識別情報サーバおよび文書サーバの動作の一例を示したシーケンス図である。
【符号の説明】
【００９５】
１０…端末装置、２０…文書サーバ、２５…文書/筆跡情報記憶部、２７ｂ…位置符号生成部、３０…識別情報サーバ、４０…画像形成装置、５０…端末装置、６０…デジタルペン、６１…制御部、６５…情報メモリ、６９…キャップ、６１１…画像処理部、６１２…データ処理部、６１３…出力部、６１４…照明駆動部、６１６…動作制御部、ＳＷ１…キャップスイッチ、ＳＷ２…筆圧検知スイッチ、ＳＷ３…ユーザスイッチ
【図１】
0005181700.tif 000002
【図２】
0005181700.tif 000003
【図３】
0005181700.tif 000004
【図４】
0005181700.tif 000005
【図５】
0005181700.tif 000006
【図６】
0005181700.tif 000007
【図７】
0005181700.tif 000008
【図８】
0005181700.tif 000009
【図９】
0005181700.tif 000010
【図１０】
0005181700.tif 000011
【図１１】
0005181700.tif 000012
【図１２】
0005181700.tif 000013
【図１３】
0005181700.tif 000014
【図１４】
0005181700.tif 000015
【図１５】
0005181700.tif 000016
【図１６】
0005181700.tif 000017
【図１７】
0005181700.tif 000018