(57)【要約】【課題】電子ペンの電子ペン用媒体に対する所定時間内のタップ回数に応じて所定の処理を実行する電子ペン及びそれに用いられるプログラムを提供する。【解決手段】利用者は、電子ペン８０Ａにより、電子ペン用媒体における任意のユーザエリアをタップする。電子ペン８０Ａは、記入内容に対応する記入情報を取得し、当該記入情報に含まれる座標データに基づいて定義情報を参照することで、利用者がタップしたユーザエリアを認識する。また、電子ペン８０Ａは、記入情報に基づいて、認識したユーザエリアへの所定時間内のタップ回数を特定する。さらに、電子ペン８０Ａは、ユーザエリア及びタップ回数に基づいて、出力情報から対応する音声データを抽出し、スピーカ１９から音声を出力する。よって、同一のユーザエリアをタップした回数によって、異なる音声を利用者にフィードバックすることができる。【選択図】図５
2008152547.tif 000002
【特許請求の範囲】
【請求項１】
電子ペンにより認識可能なコード化パターンが印刷され、１つ以上のユーザエリアが設定された電子ペン用媒体に記入された情報を処理する電子ペンであって、
音声データに基づいて音声を出力する音声出力部と、
前記ユーザエリアと、前記コード化パターン上における前記ユーザエリアの位置座標を示す座標データと、前記電子ペンによるタップ回数と、前記音声出力部から出力する音声データとを対応付けた出力情報を記憶する情報記憶手段と、
前記電子ペン用媒体への記入内容に対応する記入情報を取得する記入情報取得手段と、
前記記入情報に含まれる座標データに基づいて前記出力情報を参照することで前記ユーザエリアを認識するユーザエリア認識手段と、
前記記入情報に基づいて、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定するタップ回数特定手段と、
前記ユーザエリア認識手段が認識したユーザエリアと、前記タップ回数特定手段が特定したタップ回数とに基づいて、前記出力情報から対応する音声データを抽出するデータ抽出手段と、
前記データ抽出手段が抽出した音声データに基づく音声を前記音声出力部から出力させる処理実行手段と、を備えることを特徴とする電子ペン。
【請求項２】
前記記入情報に基づいて、データ開始点及びデータ終了点を特定する開始終了点特定手段をさらに備え、
前記ユーザエリア認識手段は、前記データ開始点及び前記データ終了点の座標データに基づいて前記出力情報を参照することで、当該データ開始点及び当該データ終了点の双方が含まれる前記ユーザエリアを認識するものであり、
前記タップ回数特定手段は、前記データ開始点及び前記データ終了点に基づく時間及び／又は距離により、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定することを特徴とする請求項１に記載の電子ペン。
【請求項３】
前記出力情報として記憶される音声データは、各ユーザエリアに対応して設定された文章がタップ回数によって異なる言語で発声される音声データであることを特徴とする請求項１又は２に記載の電子ペン。
【請求項４】
前記出力情報として記憶される音声データは、各ユーザエリアに対応して設定され、タップ回数により特定される異なる速度の音声データであることを特徴とする請求項１又は２に記載の電子ペン。
【請求項５】
前記処理実行手段は、前記データ抽出手段が抽出した音声データをタップ回数によって異なる速度で再生することで音声を前記音声出力部から出力させることを特徴とする請求項１又は２に記載の電子ペン。
【請求項６】
データを表示する表示部を備える端末装置と通信可能であり、電子ペンにより認識可能なコード化パターンが印刷され、１つ以上のユーザエリアが設定された電子ペン用媒体に記入された情報を処理する電子ペンであって、
前記ユーザエリアと、前記コード化パターン上における前記ユーザエリアの位置座標を示す座標データと、前記電子ペンによるタップ回数と、前記表示部に表示するデータとを対応付けた出力情報を記憶する情報記憶手段と、
前記電子ペン用媒体への記入内容に対応する記入情報を取得する記入情報取得手段と、
前記記入情報に含まれる座標データに基づいて前記出力情報を参照することで前記ユーザエリアを認識するユーザエリア認識手段と、
前記記入情報に基づいて、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定するタップ回数特定手段と、
前記ユーザエリア認識手段が認識したユーザエリアと、前記タップ回数特定手段が特定したタップ回数とに基づいて、前記出力情報から対応するデータを抽出するデータ抽出手段と、
前記データ抽出手段が抽出したデータを前記端末装置へ送信する処理実行手段と、を備えることを特徴とする電子ペン。
【請求項７】
前記記入情報に基づいて、データ開始点及びデータ終了点を特定する開始終了点特定手段をさらに備え、
前記ユーザエリア認識手段は、前記データ開始点及び前記データ終了点の座標データに基づいて前記出力情報を参照することで、当該データ開始点及び当該データ終了点の双方が含まれる前記ユーザエリアを認識するものであり、
前記タップ回数特定手段は、前記データ開始点及び前記データ終了点に基づく時間及び／又は距離により、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定することを特徴とする請求項６に記載の電子ペン。
【請求項８】
前記ユーザエリアに対応して設定された複数のデータは、相互に関連することを特徴とする請求項６又は７に記載の電子ペン。
【請求項９】
電子ペンにより認識可能なコード化パターンが印刷され、１つ以上のユーザエリアが設定された電子ペン用媒体に記入された情報を処理する電子ペンにより実行されるプログラムであって、
前記電子ペンは、音声データに基づいて音声を出力する音声出力部を備え、
前記プログラムは、
前記ユーザエリアと、前記コード化パターン上における前記ユーザエリアの位置座標を示す座標データと、前記電子ペンによるタップ回数と、前記音声出力部から出力する音声データとを対応付けた出力情報を記憶する情報記憶手段、
前記電子ペン用媒体への記入内容に対応する記入情報を取得する記入情報取得手段、
前記記入情報に含まれる座標データに基づいて前記出力情報を参照することで前記ユーザエリアを認識するユーザエリア認識手段、
前記記入情報に基づいて、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定するタップ回数特定手段、
前記ユーザエリア認識手段が認識したユーザエリアと、前記タップ回数特定手段が特定したタップ回数とに基づいて、前記出力情報から対応する音声データを抽出するデータ抽出手段、
前記データ抽出手段が抽出した音声データに基づく音声を前記音声出力部から出力させる処理実行手段、として前記電子ペンを機能させることを特徴とするプログラム。
【請求項１０】
データを表示する表示部を備える端末装置と通信可能であり、電子ペンにより認識可能なコード化パターンが印刷され、１つ以上のユーザエリアが設定された電子ペン用媒体に記入された情報を処理する電子ペンにより実行されるプログラムであって、
前記プログラムは、
前記ユーザエリアと、前記コード化パターン上における前記ユーザエリアの位置座標を示す座標データと、前記電子ペンによるタップ回数と、前記表示部に表示するデータとを対応付けた出力情報を記憶する情報記憶手段、
前記電子ペン用媒体への記入内容に対応する記入情報を取得する記入情報取得手段、
前記記入情報に含まれる座標データに基づいて前記出力情報を参照することで前記ユーザエリアを認識するユーザエリア認識手段、
前記記入情報に基づいて、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定するタップ回数特定手段、
前記ユーザエリア認識手段が認識したユーザエリアと、前記タップ回数特定手段が特定したタップ回数とに基づいて、前記出力情報から対応するデータを抽出するデータ抽出手段、
前記データ抽出手段が抽出したデータを前記端末装置へ送信する処理実行手段、として前記電子ペンを機能させることを特徴とするプログラム。
【請求項１１】
電子ペンにより認識可能なコード化パターンが印刷され、１つ以上のユーザエリアが設定された電子ペン用媒体に記入された情報を処理する電子ペンであって、
前記ユーザエリアと、前記コード化パターン上における前記ユーザエリアの位置座標を示す座標データと、前記電子ペンによるタップ回数と、所定の処理を実行する処理データとを対応付けた実行情報を記憶する情報記憶手段と、
前記電子ペン用媒体への記入内容に対応する記入情報を取得する記入情報取得手段と、
前記記入情報に含まれる座標データに基づいて前記実行情報を参照することで前記ユーザエリアを認識するユーザエリア認識手段と、
前記記入情報に基づいて、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定するタップ回数特定手段と、
前記ユーザエリア認識手段が認識したユーザエリアと、前記タップ回数特定手段が特定したタップ回数とに基づいて、前記実行情報から対応する処理データを抽出する処理データ抽出手段と、
前記処理データ抽出手段が抽出した処理データに基づいて所定の処理を実行する処理実行手段と、を備えることを特徴とする電子ペン。
【請求項１２】
電子ペンにより認識可能なコード化パターンが印刷され、１つ以上のユーザエリアが設定された電子ペン用媒体に記入された情報を処理する電子ペンにより実行されるプログラムであって、
前記プログラムは、
前記ユーザエリアと、前記コード化パターン上における前記ユーザエリアの位置座標を示す座標データと、前記電子ペンによるタップ回数と、所定の処理を実行する処理データとを対応付けた実行情報を記憶する情報記憶手段、
前記電子ペン用媒体への記入内容に対応する記入情報を取得する記入情報取得手段、
前記記入情報に含まれる座標データに基づいて前記実行情報を参照することで前記ユーザエリアを認識するユーザエリア認識手段、
前記記入情報に基づいて、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定するタップ回数特定手段、
前記ユーザエリア認識手段が認識したユーザエリアと、前記タップ回数特定手段が特定したタップ回数とに基づいて、前記実行情報から対応する処理データを抽出する処理データ抽出手段、
前記処理データ抽出手段が抽出した処理データに基づいて所定の処理を実行する処理実行手段、として前記電子ペンを機能させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子ペンにより電子ペン用媒体等に記入された記入情報を処理する技術に関する。
【背景技術】
【０００２】
近年、「電子ペン」、「デジタルペン」などと呼ばれるペン型入力デバイスが登場しており（以下、本明細書では「電子ペン」と呼ぶ。）、その代表的なものとしてスウェーデンのAnoto社が開発した「アノトペン（Anoto pen）」が知られている（特許文献１参照）。アノトペンは、所定のドットパターンが印刷された専用紙（以下、「専用ペーパー」とも呼ぶ。）とペアで使用される。アノトペンは、通常のインクタイプのペン先部に加えて、専用紙上のドットパターンを読み取るための小型カメラと、データ通信ユニットを搭載している。利用者が専用紙上にアノトペンで文字などを書いたり、専用紙上に図案化されている画像にチェックマークを記入したりすると、ペンの移動に伴って小型カメラが専用紙に印刷されたドットパターンを検出し、利用者が書き込んだ文字、画像などの記入情報が取得される。この記入情報が、データ通信ユニットによりアノトペンから近くのパーソナルコンピュータや携帯電話などの端末装置に送信される。このアノトペンを利用したシステムは、キーボードに代わる入力デバイスとして利用することが可能であり、上述のパーソナルコンピュータやキーボードの使用に抵抗がある利用者にとっては非常に使いやすい。そのため、現在、各種ビジネス上の書類、申込書、契約書等に記入されたデータをデジタル化する手法として、電子ペンを利用したシステムが普及しつつある（例えば、特許文献２）。
【０００３】
【特許文献１】特表２００３−５１１７６１号公報
【特許文献２】特開２００４−１５３６１２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
そこで本発明は、電子ペンの電子ペン用媒体に対する所定時間内のタップ回数に応じて、所定の処理を実行する電子ペン及びそれに用いられるプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００５】
本発明に係る電子ペンは、電子ペンにより認識可能なコード化パターンが印刷され、１つ以上のユーザエリアが設定された電子ペン用媒体に記入された情報を処理する電子ペンであって、音声データに基づいて音声を出力する音声出力部と、前記ユーザエリアと、前記コード化パターン上における前記ユーザエリアの位置座標を示す座標データと、前記電子ペンによるタップ回数と、前記音声出力部から出力する音声データとを対応付けた出力情報を記憶する情報記憶手段と、前記電子ペン用媒体への記入内容に対応する記入情報を取得する記入情報取得手段と、前記記入情報に含まれる座標データに基づいて前記出力情報を参照することで前記ユーザエリアを認識するユーザエリア認識手段と、前記記入情報に基づいて、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定するタップ回数特定手段と、前記ユーザエリア認識手段が認識したユーザエリアと、前記タップ回数特定手段が特定したタップ回数とに基づいて、前記出力情報から対応する音声データを抽出するデータ抽出手段と、前記データ抽出手段が抽出した音声データに基づく音声を前記音声出力部から出力させる処理実行手段と、を備えることを特徴とする。
【０００６】
この構成によれば、利用者が電子ペンにより電子ペン用媒体のユーザエリアを軽く叩いてタップすると、記入情報取得手段によって、電子ペンは電子ペン用媒体へのタップによる記入情報を取得する。そして、ユーザエリア認識手段は、記入情報取得手段により取得された記入情報に含まれる座標データに基づいて、情報記憶手段に記憶された出力情報を参照し、ユーザエリアを認識する。さらに、タップ回数特定手段は、記入情報に基づいて、ユーザエリア認識手段が認識したユーザエリアにおいて、所定時間内にタップされたタップ回数を特定し、データ抽出手段は、情報記憶手段に記憶された出力情報から、特定されたタップ回数とユーザエリア認識手段が認識したユーザエリアとに対応する音声データを抽出する。そして、処理実行手段は、データ抽出手段が抽出した音声データに基づく音声を音声出力部から出力させる。このように、電子ペンは、利用者によって同一のユーザエリアが所定時間内にタップされたタップ回数に応じて、音声データに基づく音声を出力することができるとともに、音声データごとにユーザエリアを電子ペン用媒体に設定する必要もないため、電子ペン用媒体におけるユーザエリアを集約することができ、電子ペン用媒体の省スペース化を実現することができて、電子ペン用媒体のデザイン自由度を向上させることができる。
【０００７】
さらに、上記電子ペンにおいて、前記記入情報に基づいて、データ開始点及びデータ終了点を特定する開始終了点特定手段をさらに備え、前記ユーザエリア認識手段は、前記データ開始点及び前記データ終了点の座標データに基づいて前記出力情報を参照することで、当該データ開始点及び当該データ終了点の双方が含まれる前記ユーザエリアを認識するものであり、前記タップ回数特定手段は、前記データ開始点及び前記データ終了点に基づく時間及び／又は距離により、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定すると好適である。
【０００８】
このように構成された電子ペンによれば、開始終了点特定手段が記入情報に基づき、データ開始点及びデータ終了点を特定し、ユーザエリア認識手段は、開始終了点特定手段によって特定されたデータ開始点とデータ終了点の座標データに基づき出力情報を参照して、当該データ開始点及び当該データ終了点の双方が含まれるユーザエリアを認識する。そして、タップ回数特定手段は、データ開始点及びデータ終了点に基づく時間及び／又は距離により、ユーザエリア認識手段が認識したユーザエリアに対して所定時間内にタップされたタップ回数を特定する。このように、利用者が電子ペン用媒体に記入したストロークのうち、タップ回数としてカウントするのは、一つのユーザエリアにデータ開始点及びデータ終了点の双方が含まれるものが対象となる。これにより、利用者が電子ペン用媒体に記入したストロークのデータ開始点及びデータ終了点のいずれかがユーザエリアの範囲外にある場合には、利用者が特定のユーザエリアに関する音声データを電子ペンから出力させようと意図したものではないと判定することができる。また、タップ回数特定手段によって、データ開始点及び前記データ終了点に基づく時間及び／又は距離に基づいて、利用者の記入したストロークが、タップであるか否か判定され、文字や図柄とは区別される。さらに、タップ回数は、所定時間内に行われたタップの回数で決定されるため、所定時間よりも間隔のあいたタップ同士は、タップ回数としては別々にカウントされるため、タップ回数を的確に特定することができる。
【０００９】
さらに、出力情報として記憶される音声データは、各ユーザエリアに対応して設定された文章がタップ回数によって異なる言語で発声される音声データであるとよい。これにより、各ユーザエリアに関する文章を、電子ペン用媒体へのタップ回数を変えることで、各種の異なる言語で音声出力させることができる。
【００１０】
あるいは、出力情報として記憶される音声データは、各ユーザエリアに対応して設定され、タップ回数により特定される異なる速度の音声データであるとよい。これにより、電子ペンに音声データを再生させるにあたって、電子ペン用媒体へのタップ回数を変えることで、異なる再生速度の音声データを再生させることができる。
【００１１】
あるいは、上記電子ペンにおいて、処理実行手段は、データ抽出手段が抽出した音声データをタップ回数によって異なる速度で再生することで音声を音声出力部から出力させるよう構成させてもよい。この構成により、同じ音声データを電子ペン用媒体へのタップ回数を変えることで、再生速度を変えて再生させることができる。
【００１２】
また、本発明に係る電子ペンは、データを表示する表示部を備える端末装置と通信可能であり、電子ペンにより認識可能なコード化パターンが印刷され、１つ以上のユーザエリアが設定された電子ペン用媒体に記入された情報を処理する電子ペンであって、前記ユーザエリアと、前記コード化パターン上における前記ユーザエリアの位置座標を示す座標データと、前記電子ペンによるタップ回数と、前記表示部に表示するデータとを対応付けた出力情報を記憶する情報記憶手段と、前記電子ペン用媒体への記入内容に対応する記入情報を取得する記入情報取得手段と、前記記入情報に含まれる座標データに基づいて前記出力情報を参照することで前記ユーザエリアを認識するユーザエリア認識手段と、前記記入情報に基づいて、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定するタップ回数特定手段と、前記ユーザエリア認識手段が認識したユーザエリアと、前記タップ回数特定手段が特定したタップ回数とに基づいて、前記出力情報から対応するデータを抽出するデータ抽出手段と、前記データ抽出手段が抽出したデータを前記端末装置へ送信する処理実行手段と、を備えることを特徴とする。
【００１３】
この構成によれば、利用者が電子ペンにより電子ペン用媒体のユーザエリアを軽く叩いてタップすると、記入情報取得手段によって、電子ペンは電子ペン用媒体へのタップによる記入情報を取得する。そして、ユーザエリア認識手段は、記入情報取得手段により取得された記入情報に含まれる座標データに基づいて、情報記憶手段に記憶された出力情報を参照し、ユーザエリアを認識する。さらに、タップ回数特定手段は、記入情報に基づいて、ユーザエリア認識手段が認識したユーザエリアにおいて、所定時間内にタップされたタップ回数を特定し、データ抽出手段は、情報記憶手段に記憶された出力情報から、特定されたタップ回数とユーザエリア認識手段が認識したユーザエリアとに対応するデータを抽出する。そして、処理実行手段は、データ抽出手段が抽出したデータを端末装置へ送信する。このように、電子ペンは、利用者によって同一のユーザエリアが所定時間内にタップされたタップ回数に応じて、端末装置にデータを表示させることができるとともに、データごとにユーザエリアを電子ペン用媒体に設定する必要もないため、電子ペン用媒体におけるユーザエリアを集約することができ、電子ペン用媒体の省スペース化を実現することができて、電子ペン用媒体のデザイン自由度を向上させることができる。
【００１４】
上記電子ペンにおいて、前記記入情報に基づいて、データ開始点及びデータ終了点を特定する開始終了点特定手段をさらに備え、前記ユーザエリア認識手段は、前記データ開始点及び前記データ終了点の座標データに基づいて前記出力情報を参照することで、当該データ開始点及び当該データ終了点の双方が含まれる前記ユーザエリアを認識するものであり、前記タップ回数特定手段は、前記データ開始点及び前記データ終了点に基づく時間及び／又は距離により、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定するよう構成するとよい。
【００１５】
このように構成された電子ペンによれば、開始終了点特定手段が記入情報に基づき、データ開始点及びデータ終了点を特定し、ユーザエリア認識手段は、開始終了点特定手段によって特定されたデータ開始点とデータ終了点の座標データに基づき出力情報を参照して、当該データ開始点及び当該データ終了点の双方が含まれるユーザエリアを認識する。そして、タップ回数特定手段は、データ開始点及びデータ終了点に基づく時間及び／又は距離により、ユーザエリア認識手段が認識したユーザエリアに対して所定時間内にタップされたタップ回数を特定する。このように、利用者が電子ペン用媒体に記入したストロークのうち、タップ回数としてカウントするのは、一つのユーザエリアにデータ開始点及びデータ終了点の双方が含まれるものが対象となる。これにより、利用者が電子ペン用媒体に記入したストロークのデータ開始点及びデータ終了点のいずれかがユーザエリアの範囲外にある場合には、利用者が特定のユーザエリアに関するデータを端末装置から出力させようと意図したものではないと判定することができる。また、タップ回数特定手段によって、データ開始点及び前記データ終了点に基づく時間及び／又は距離に基づいて、利用者の記入したストロークが、タップであるか否か判定され、文字や図柄とは区別される。さらに、タップ回数は、所定時間内に行われたタップの回数で決定されるため、所定時間よりも間隔のあいたタップ同士は、タップ回数としては別々にカウントされるため、タップ回数を的確に特定することができる。
【００１６】
このような構成において、ユーザエリアに対応して設定された複数のデータは、相互に関連するとよい。これにより、利用者が同一のユーザエリアに対してタップ回数を変えてタップを行うことにより、電子ペンは関連するデータを端末装置の表示部に表示させることができ、ユーザエリアに関する内容についての理解がしやすい。
【００１７】
また、本発明に係るプログラムは、電子ペンにより認識可能なコード化パターンが印刷され、１つ以上のユーザエリアが設定された電子ペン用媒体に記入された情報を処理する電子ペンにより実行されるプログラムであって、前記電子ペンは、音声データに基づいて音声を出力する音声出力部を備え、前記プログラムは、前記ユーザエリアと、前記コード化パターン上における前記ユーザエリアの位置座標を示す座標データと、前記電子ペンによるタップ回数と、前記音声出力部から出力する音声データとを対応付けた出力情報を記憶する情報記憶手段、前記電子ペン用媒体への記入内容に対応する記入情報を取得する記入情報取得手段、前記記入情報に含まれる座標データに基づいて前記出力情報を参照することで前記ユーザエリアを認識するユーザエリア認識手段、前記記入情報に基づいて、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定するタップ回数特定手段、前記ユーザエリア認識手段が認識したユーザエリアと、前記タップ回数特定手段が特定したタップ回数とに基づいて、前記出力情報から対応する音声データを抽出するデータ抽出手段、前記データ抽出手段が抽出した音声データに基づく音声を前記音声出力部から出力させる処理実行力手段、として前記電子ペンを機能させることを特徴とする。
【００１８】
あるいは、別の本発明に係るプログラムは、データを表示する表示部を備える端末装置と通信可能であり、電子ペンにより認識可能なコード化パターンが印刷され、１つ以上のユーザエリアが設定された電子ペン用媒体に記入された情報を処理する電子ペンにより実行されるプログラムであって、前記プログラムは、前記ユーザエリアと、前記コード化パターン上における前記ユーザエリアの位置座標を示す座標データと、前記電子ペンによるタップ回数と、前記表示部に表示するデータとを対応付けた出力情報を記憶する情報記憶手段、前記電子ペン用媒体への記入内容に対応する記入情報を取得する記入情報取得手段、前記記入情報に含まれる座標データに基づいて前記出力情報を参照することで前記ユーザエリアを認識するユーザエリア認識手段、前記記入情報に基づいて、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定するタップ回数特定手段、前記ユーザエリア認識手段が認識したユーザエリアと、前記タップ回数特定手段が特定したタップ回数とに基づいて、前記出力情報から対応するデータを抽出するデータ抽出手段、前記データ抽出手段が抽出したデータを前記端末装置へ送信する処理実行手段、として前記電子ペンを機能させることを特徴とする。
【００１９】
また、本発明に係る電子ペンは、電子ペンにより認識可能なコード化パターンが印刷され、１つ以上のユーザエリアが設定された電子ペン用媒体に記入された情報を処理する電子ペンであって、前記ユーザエリアと、前記コード化パターン上における前記ユーザエリアの位置座標を示す座標データと、前記電子ペンによるタップ回数と、所定の処理を実行する処理データとを対応付けた実行情報を記憶する情報記憶手段と、前記電子ペン用媒体への記入内容に対応する記入情報を取得する記入情報取得手段と、前記記入情報に含まれる座標データに基づいて前記実行情報を参照することで前記ユーザエリアを認識するユーザエリア認識手段と、前記記入情報に基づいて、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定するタップ回数特定手段と、前記ユーザエリア認識手段が認識したユーザエリアと、前記タップ回数特定手段が特定したタップ回数とに基づいて、前記実行情報から対応する処理データを抽出する処理データ抽出手段と、前記処理データ抽出手段が抽出した処理データに基づいて所定の処理を実行する処理実行手段と、を備えることを特徴とする。
【００２０】
この構成によれば、利用者が電子ペンにより電子ペン用媒体のユーザエリアを軽く叩いてタップすると、記入情報取得手段により、電子ペンは電子ペン用媒体へのタップによる記入情報を取得する。そして、ユーザエリア認識手段は、記入情報取得手段により取得された記入情報に含まれる座標データに基づいて、情報記憶手段に記憶された実行情報を参照し、ユーザエリアを認識する。さらに、タップ回数特定手段は、記入情報に基づいて、ユーザエリア認識手段が認識したユーザエリアにおいて、所定時間内にタップされたタップ回数を特定し、処理データ抽出手段は、情報記憶手段に記憶された実行情報から、特定されたタップ回数とユーザエリア認識手段が認識したユーザエリアとに対応する処理データを抽出する。そして、処理実行手段は、処理データ抽出手段が抽出した処理データに基づく処理を実行する。このように、電子ペンは、利用者によって同一のユーザエリアが所定時間内にタップされたタップ回数に応じて、処理データに基づく処理を実行することができるとともに、処理データごとにユーザエリアを電子ペン用媒体に設定する必要もないため、電子ペン用媒体におけるユーザエリアを集約することができ、電子ペン用媒体の省スペース化を実現することができて、電子ペン用媒体のデザイン自由度を向上させることができる。
【００２１】
また、本発明に係るプログラムは、電子ペンにより認識可能なコード化パターンが印刷され、１つ以上のユーザエリアが設定された電子ペン用媒体に記入された情報を処理する電子ペンにより実行されるプログラムであって、前記プログラムは、前記ユーザエリアと、前記コード化パターン上における前記ユーザエリアの位置座標を示す座標データと、前記電子ペンによるタップ回数と、所定の処理を実行する処理データとを対応付けた実行情報を記憶する情報記憶手段、前記電子ペン用媒体への記入内容に対応する記入情報を取得する記入情報取得手段、前記記入情報に含まれる座標データに基づいて前記実行情報を参照することで前記ユーザエリアを認識するユーザエリア認識手段、前記記入情報に基づいて、前記ユーザエリア認識手段が認識したユーザエリアが、所定時間内にタップされた回数であるタップ回数を特定するタップ回数特定手段、前記ユーザエリア認識手段が認識したユーザエリアと、前記タップ回数特定手段が特定したタップ回数とに基づいて、前記実行情報から対応する処理データを抽出する処理データ抽出手段、前記処理データ抽出手段が抽出した処理データに基づいて所定の処理を実行する処理実行手段、として前記電子ペンを機能させることを特徴とする。
【発明の効果】
【００２２】
本発明に係る電子ペン及びそれに用いられるプログラムによれば、電子ペンの電子ペン用媒体に対する所定時間内のタップ回数に応じて、所定の処理を実行することができる。
【発明を実施するための最良の形態】
【００２３】
以下、図面を参照して本発明の好適な実施の形態について説明する。
【００２４】
＜第１実施形態＞
本実施形態の情報処理システムは、図１及び図２に示すように、電子ペン８０Ａ（８０）、専用ペーパー（電子ペン用媒体）２０Ａ（２０）及び端末装置８５から構成される。ここで、図１は電子ペン８０Ａの使用形態を模式的に示す図であり、図２は電子ペン８０Ａの構造を示すブロック図である。専用ペーパ２０Ａには、ドットパターン（コード化パターン）が印刷されている。電子ペン８０Ａは、通常のインクペンと同様のペン先部１７を備えており、利用者が通常のインクペンと同様にペン先部１７によって専用ペーパー２０Ａ上に文字などを書くと、電子ペン８０Ａは、ペン先部１７の移動軌跡に沿って、専用ペーパー２０Ａに印刷されたドットパターンを局所的、連続的に読み取り、専用ペーパー２０Ａにおけるその局所位置の座標を算出し、その座標データ等に基づいて、入力文字を記憶したり、タップに応じた処理を行ったりする等、所定の処理を実行する。以下、各構成について詳細に説明する。
【００２５】
[ 専用ペーパー ]
まず、専用ペーパー２０Ａについて説明する。専用ペーパー２０Ａは、用紙上にドットパターンが印刷され、さらにその上に罫線や記入枠などの図案や項目、文言、イラスト等が印刷されたものである。ドットパターンは、赤外線を吸収するカーボンを含んだインキにより印刷される。また、図案等は、カーボンを含まない通常のインキにより印刷される。ドットパターンと図案等とは用紙に対して同時に印刷してもよいし、どちらかを先に印刷してもよい。
【００２６】
図５（ａ）に、図案等が印刷された専用ペーパー２０Ａの例を示す。図５（ａ）に示す例は、申込書等の帳票の例であり、名前記入エリア６０や住所記入エリア６１等のユーザエリアが印刷されている。ドットパターンは、専用ペーパー２０Ａのほぼ全面に印刷されており、その上に名前記入エリア６０等のユーザエリアの枠線が、カーボンを含まない通常のインキにより印刷されている。利用者は、ドットパターンを意識することなく、電子ペン８０Ａを使用して必要事項を名前記入エリア６０や住所記入エリア６１に記入する。
【００２７】
[ ドットパターン ]
続いて、ドットパターンについて説明する。図３は、専用ペーパー２０Ａに印刷されたドットパターンのドットとそのドットが変換される値との関係を説明する図である。図３に示すように、ドットパターンの各ドットは、その位置によって所定の値に対応付けられている。すなわち、ドットの位置を格子の基準位置（縦線及び横線の交差点）から上下左右のどの方向にシフトされているかによって、各ドットは、０〜３の値に対応付けられている。また、各ドットの値は、さらに、Ｘ座標用の第１ビット値及びＹ座標用の第２ビット値に変換できる。このようにして対応付けられた情報の組合せにより、専用ペーパー２０Ａ上の位置座標が決定されるよう構成されている。
【００２８】
図４（ａ）は、あるドットパターンの配列を示している。図４（ａ）に示すように、縦横約２mmの範囲内に６×６個のドットが、専用ペーパー上のどの部分から６×６ドットを取ってもユニークなパターンとなるように配置されている。これら３６個のドットにより形成されるドットパターンは位置座標（例えば、そのドットパターンがその専用ペーパー上のどの位置にあるのか）を保持している。図４（ｂ）は、図４（ａ）に示す各ドットを、格子の基準位置からのシフト方向によって、図３に示す規則性に基づいて対応づけられた値に変換したものである。この変換は、ドットパターンの画像を撮影する電子ペン８０Ａによって行われる。
【００２９】
[ 電子ペン ]
次に電子ペン８０Ａについて説明する。図２に示すように、電子ペン８０Ａは、その内部にプロセッサ１１、メモリ１２、データ通信ユニット１３、バッテリー１４、ＬＥＤ１５、カメラ１６、圧力センサ１８、スピーカ（音声出力部）１９及びクロック２２を備える。また、電子ペン８０Ａは通常のインクペンと同様の構成要素としてインクカートリッジ（図示せず）などを有する。
【００３０】
ＬＥＤ１５は、電子ペン８０Ａのペン先付近に取り付けられており、専用ペーパー２０Ａ上のペン先部１７近傍（領域１５ａ）に向けて、赤外線を照明する（図１参照）。領域１５ａは、ペン先部１７が専用ペーパー２０Ａに接触する位置とはわずかにずれている。カメラ１６は、ＬＥＤ１５によって照明された領域１５ａ内におけるドットパターンを撮影し、そのドットパターンの画像データをプロセッサ１１に供給する。ここで、カーボンは赤外線を吸収するため、ＬＥＤ１５によって照射された赤外線は、ドットの部分でドットに含まれるカーボンによって吸収される。そのため、ドットの部分は、赤外線の反射量が少なく、ドット以外の部分は赤外線の反射量が多い。したがって、カメラ１６の撮影により、赤外線の反射量の違いから、カーボンを含むドットの領域とそれ以外の領域を区別することができる。これは、撮影領域に罫線や枠などが印刷されてあったとしても、罫線や枠などのインクには、カーボンが含まれていないため、ドットパターンを認識することができる。なお、カメラ１６による撮影領域は、図４（ａ）に示すような約２mm×約２mmの大きさを含む範囲であり、カメラ１６の撮影は、毎秒５０〜１００回程度行われる。
【００３１】
バッテリー１４は電子ペン８０Ａ内の各部品に電力を供給するためのものであり、例えば電子ペン８０Ａのキャップ（図示せず）の脱着により電子ペン８０Ａ自体の電源のオン／オフを行うよう構成させてもよい。クロック２２は、現在時刻（タイムスタンプ）を発信し、プロセッサ１１に供給する。圧力センサ１８は、利用者が電子ペン８０Ａにより専用ペーパー２０Ａ上に文字などを書く際にペン先部１７に与えられる圧力、即ち筆圧を検出し、プロセッサ１１へ供給する。
【００３２】
プロセッサ１１は、圧力センサ１８から与えられる筆圧データに基づいて、ＬＥＤ１５及びカメラ１６のスイッチオン／オフの切換を行う。即ち、利用者が電子ペン８０Ａで専用ペーパー２０Ａ上に文字などを書くと、ペン先部１７には筆圧がかかる。よって、圧力センサ１８によって所定値以上の筆圧が検出されたときに、プロセッサ１１は、利用者が記入を開始したと判定して、ＬＥＤ１５及びカメラ１６を作動させる。
【００３３】
プロセッサ１１は、利用者の記入が行われる間、カメラ１６によって供給される画像データのドットパターンから、利用者が記入するストロークの専用ペーパー２０Ａ上でのＸ，Ｙ座標（単に「座標データ」とも呼ぶ）を連続的に算出していく。すなわち、プロセッサ１１は、カメラ１６によって供給される、図４（ａ）に示されるようなドットパターンの画像データを図４（ｂ）に示すデータ配列に変換し、さらに、Ｘ座標ビット値・Ｙ座標ビット値に変換して、そのデータ配列から所定の演算方法によりＸ，Ｙ座標データを算出する。そしてプロセッサ１１は、現在時刻（タイムスタンプ）を発信するクロック２２から時間情報を取得し、その時間情報と、筆圧データ及びＸ，Ｙ座標データとを関連付け、これらの情報を記入情報として取得する。さらにプロセッサ１１は、記入情報に基づいて所定の処理を実行する。ここで、一枚の専用ペーパー（電子ペン用媒体）２０Ａ内のドットパターンは、その専用ペーパー２０Ａ内で重複することはないため、利用者が電子ペン８０Ａでユーザエリアに必要事項を記入すると、その記入が専用ペーパー２０Ａのどのユーザエリアに対応するものであるかを、座標データから特定することができる。
【００３４】
メモリ１２には、プロセッサ１１によって記入情報が時系列で記憶されていく。またメモリ１２には予め、ユーザエリアと、ドットパターン上におけるユーザエリアの位置座標を示す座標データと、利用者により行われるタップ回数と、タップ回数に応じた所定の処理を実行する処理データとを対応付けた実行情報を記憶しておく。メモリ１２の容量は例えば１Ｍバイト〜２Ｇバイト程度とすることができる。
【００３５】
スピーカ（音声出力部）１９は、プロセッサ１１による出力指示によって、ユーザエリア毎のタップ回数に応じた音声データを再生出力する。
【００３６】
データ通信ユニット１３は、記入情報あるいはタップ回数に応じた所定のデータを記録、表示させるため、あるいはタップ回数に応じた所定の処理を実行させるため、プロセッサ１１により供給されるメモリ１２内の所定のデータを近傍にある端末装置８５へ無線送信する。データ通信ユニット１３による送信は、Bluetooth（登録商標）の無線送信によると好適である。なお、ＵＳＢケーブルを使用した有線送信、端子などの接触によるデータ送信など、他の方法によって、データ通信ユニット１３から端末装置８５へデータ送信を行ってもよい。
【００３７】
ここで、電子ペン８０Ａが有する機能について図６を参照して説明する。図６は、電子ペン８０Ａの主要な構成を示す機能ブロック図である。電子ペン８０Ａは、取得したＸ，Ｙ座標データ等の記入情報に基づいて、専用アプリケーションを実行することで所定の処理を行う。
【００３８】
図６に示すように、電子ペン８０Ａは、機能的には、情報記憶手段７０、記入情報取得手段７１、開始終了点特定手段７２、ユーザエリア認識手段７３、タップ回数特定手段７４、処理データ抽出手段（データ抽出手段）７５、処理実行手段７６、及びデータ通信手段７７を備える。情報記憶手段７０は、物理的には、ＲＯＭやＲＡＭといったメモリ１２によって構成され、記入情報取得手段７１は、カメラ１６、クロック２２、プロセッサ１１等によって構成される。また、開始終了点特定手段７２、ユーザエリア認識手段７３、タップ回数特定手段７４、処理データ抽出手段７５及び処理実行手段７６は、ＣＰＵ等のプロセッサ１１に組み込まれている。
【００３９】
情報記憶手段７０は、ユーザエリアと、ドットパターン上におけるユーザエリアの位置座標を示す座標データと、利用者により行われるタップ回数と、タップ回数に応じた所定の処理を実行する処理データとを対応付けて、実行情報として記憶するメモリである。また、情報記憶手段７０は、プロセッサ１１からの記入情報を時系列的に記憶する。
【００４０】
図８に示すように、情報記憶手段７０には、専用ペーパー（電子ペン用媒体）２０Ａのユーザエリアを識別するエリアＩＤと、ユーザエリアの項目を表すエリア名と、ユーザエリアの位置座標領域を表す座標データとを対応付けた定義情報が記憶されている。エリアＩＤ「Ａ０１」に関連してユーザ名として「名前記入エリア」が記憶され、エリアＩＤ「Ａ０２」に関連してユーザ名として「住所記入エリア」が記憶されている。各ユーザエリアの座標データを構成するデータ(xn,yn)、Hn、Wnは、図９に示すように、それぞれ、ドットパターン上におけるユーザエリアの頂点Ｖ(xn,yn)の座標、Ｙ軸方向の高さ(Height)、Ｘ軸方向の幅(Width)を意味する。
【００４１】
また情報記憶手段７０には、図１０に示すように、ユーザエリアを識別するエリアＩＤと、利用者が行うタップ回数と、音声データとを対応付けた出力情報が記憶されている。例えば、エリアＩＤ「Ａ０１」のタップ回数「１」に対しては、日本語の音声データＡが関連付けられ、同じエリアＩＤ「Ａ０１」のタップ回数「２」に対しては、英語の音声データＢが関連付けられて記憶されている。また、エリアＩＤ「Ａ０２」のタップ回数「１」に対しては、日本語の音声データＣが関連付けられ、同じエリアＩＤ「Ａ０２」のタップ回数「２」に対しては、英語の音声データＤが関連付けられて記憶されている。これらの音声データＡ〜Ｄは、スピーカ（音声出力部）１９によって音声出力可能な音声データである。
【００４２】
ここで、情報記憶手段７０に記憶されているこれら定義情報及び出力情報を実行情報と称することとする。さらに情報記憶手段７０には、記入情報取得手段７１により取得された記入情報が時系列で記憶されていく。
【００４３】
記入情報取得手段７１は、電子ペン８０Ａによる専用ペーパー（電子ペン用媒体）２０Ａへの記入内容に対応する記入情報を取得する手段である。記入情報取得手段７１は、利用者の記入が行われる間、カメラ１６によって供給される画像データのドットパターンから、利用者が記入するストロークの専用ペーパー２０Ａ上でのＸ，Ｙ座標データを連続的に算出していく。すなわち、記入情報取得手段７１は、カメラ１６によって供給される、図４（ａ）に示されるようなドットパターンの画像データを図４（ｂ）に示すデータ配列に変換し、さらに、Ｘ座標ビット値・Ｙ座標ビット値に変換して、そのデータ配列から所定の演算方法によりＸ，Ｙ座標データを算出する。そして記入情報取得手段７１は、現在時刻（タイムスタンプ）を発信するクロック２２から時間情報を取得し、その時間情報と、筆圧データ及びＸ，Ｙ座標データとを関連付け、これらの情報を記入情報として取得する。記入情報には、タップ（電子ペン８０Ａのペン先部１７の専用ペーパー２０Ａへの軽叩）、文字、記号、絵柄等を記入する際に取得する情報が含まれる。特に、タップにより取得される記入情報をタップ情報と呼ぶ。
【００４４】
開始終了点特定手段７２は、記入情報取得手段７１が取得した記入情報に含まれるストロークのデータ開始点及びデータ終了点を特定する。具体的には、開始終了点特定手段７２は、データ開始点及びデータ終了点それぞれの位置座標を示す座標データと記入時刻とを特定する。
【００４５】
ユーザエリア認識手段７３は、記入情報に含まれる座標データに基づいて、情報記憶手段７０が記憶した定義情報（図８参照）を参照することにより、対応するユーザエリアを認識する。このとき、ユーザエリア認識手段７３は、１つのストロークのデータ開始点及びデータ終了点の双方が含まれるユーザエリアのみを認識するようにするとよい。そのような設定にすれば、利用者が専用ペーパー２０Ａに記入したストロークのデータ開始点及びデータ終了点のいずれかがユーザエリアの範囲外にある場合には、利用者が特定のユーザエリアに関する音声データを電子ペン８０Ａから出力させようと意図したものではないと判定することができる。
【００４６】
タップ回数特定手段７４は、開始終了点特定手段７２によって特定されたデータ開始点及びデータ終了点における時間及び／又は距離に基づいて、利用者により専用ペーパー２０Ａに記入されたストロークがタップであるか否かを判定し、ユーザエリア認識手段７３が認識したユーザエリアにおいて所定時間内にタップされた回数（タップ回数）を特定する。これにより、利用者の記入したストロークが、タップであるか否か判定され、文字や図柄とは区別されるとともに、タップ回数は、所定時間内に行われたタップの回数で決定されるため、所定時間よりも間隔のあいたタップ同士は、タップ回数としては別々にカウントされ、タップ回数を的確に特定することができる。
【００４７】
具体的には、利用者により専用ペーパー（電子ペン用媒体）２０Ａに記入されたストロークがタップであるか否かを判定するにあたっては、第１の方法として、タップ回数特定手段７４は、データ終了点の記入時刻とデータ開始点の記入時刻の差分を算出し、当該差分が予め設定された所定時間未満である場合にストロークがタップであると判定する。別の第２の方法として、タップ回数特定手段７４は、座標データに基づいてデータ開始点とデータ終了点の距離を算出し、当該距離が予め設定された所定距離未満である場合にストロークがタップであると判定するようにしてもよい。あるいは第３の方法として、データ開始点とデータ終了点における時間及び距離の両方に条件を付けて、ストロークがタップであるか否かを判定するようにしてもよい。
【００４８】
タップ回数特定手段７４は、タップ回数を求めるため、記入情報に含まれる時間情報に基づいて、電子ペン８０Ａが認識したユーザエリアに最初に触れた時刻をタップ開始時刻と特定し、さらに、タップ開始時刻に予め設定された所定時間（例えば、０．５秒）を加算することでタップ終了時刻を特定する。そして、タップ回数特定手段７４は、タップ開始時刻からタップ終了時刻の間におけるユーザエリアへのタップ回数を特定する。
【００４９】
処理データ抽出手段７５は、ユーザエリア認識手段７３が認識したユーザエリアと、タップ回数特定手段７４が特定したタップ回数とに基づいて、情報記憶手段７０が記憶した出力情報（図１０参照）から対応する音声データ（処理データ）を抽出する。
【００５０】
処理実行手段７６は、処理データ抽出手段７５によって抽出された音声データを用いて所定の処理を実行する。すなわち、処理実行手段７６は、処理データ抽出手段７５によって抽出された音声データをスピーカ（音声出力部）１９に再生出力させる。
【００５１】
データ通信手段７７は、アンテナ等のデータ通信ユニット１３により構成され、端末装置８５とデータの送受信を行う。すなわち、データ通信手段７７は、記入情報取得手段７１によって取得され、情報記憶手段７０に記憶された記入情報を端末装置８５へ送信する。また、データ通信手段７７は、タップ回数に応じた所定の処理を実行するため、処理データ抽出手段７５によって抽出された処理データを端末装置８５に送信するように構成してもよく、また、電子ペン８５Ａにインストールする専用アプリケーションをダウンロードするために使用されてもよい。
【００５２】
電子ペン８０Ａは、専用アプリケーションがインストールされることにより、上述の各手段が構成される。
【００５３】
[ 専用アプリケーション ]
次に、専用アプリケーション５５について図７を参照して説明する。図７は、専用アプリケーション５５のモジュール構成を示す。専用アプリケーション５５は、電子ペン８０Ａが専用ペーパー２０Ａに記入した内容に対応するデジタルデータである記入情報に基づいて所定の処理を実行するものであって、ダウンロード等により予め電子ペン８０Ａにインストールされている。専用アプリケーションは、原則として専用ペーパー２０Ａに対応付けられている。つまり、専用ペーパー２０Ａの種類が異なれば、その種類に応じて各専用ペーパー２０Ａに記入されたデータを処理する専用アプリケーションは異なる。しかし、専用ペーパー２０Ａと専用アプリケーションの対応は必ずしも１対１である必要はなく、複数種類の専用ペーパー２０Ａに１つの専用アプリケーションを対応付けてデータを処理させてもよい。また、１種類の専用ペーパー２０Ａに複数の専用アプリケーションを対応付けてデータを処理させてもよい。
【００５４】
図７に示すように、専用アプリケーション５５は、記入情報取得モジュール３０１、情報登録モジュール３０２、開始終了点特定モジュール３０３、ユーザエリア認識モジュール３０４、タップ回数特定モジュール３０５、処理データ抽出モジュール３０６、音声出力モジュール３０７及びデータ通信モジュール３０８を有する。
【００５５】
記入情報取得モジュール３０１は、記入情報取得手段７１を用いて、専用ペーパー（電子ペン用媒体）２０Ａへの電子ペン８０Ａによる記入に対応する記入情報（タップ情報を含む）を取得する機能を有するモジュールである。
【００５６】
情報登録モジュール３０２は、情報記憶手段７０に対して、図８及び図１０に示すように、ユーザエリアのエリアＩＤ、ユーザエリアの座標データ、タップ回数、及び音声データを関連付けて記憶させるモジュールである。また情報登録モジュール３０２は、情報記憶手段７０に対して、記入情報取得モジュール３０１が取得した記入情報を記憶させるモジュールである。
【００５７】
開始終了点特定モジュール３０３は、記入情報取得モジュール３０１の実行によって取得された記入情報に含まれるストロークのデータ開始点及びデータ終了点につき、それぞれの座標データ及び記入時刻を特定する機能を有する。
【００５８】
ユーザエリア認識モジュール３０４は、記入情報に含まれる座標データと、情報登録モジュール３０２によって登録される各ユーザエリアの座標データとを参照して、記入情報に対応するユーザエリアを認識する機能を有する。なお、ユーザエリア認識モジュール３０４は、１つのストロークデータのデータ開始点及びデータ終了点の双方が含まれるユーザエリアのみを認識するようにするとよい。
【００５９】
タップ回数特定モジュール３０５は、ユーザエリア認識モジュール３０４によって認識された記入情報がタップ情報であるか否か判定し、ユーザエリアへの所定時間内におけるタップ回数をカウントする機能を有する。記入情報がタップ情報であるか否かの判定方法としては、上述のように、データ開始点の記入時刻からデータ終了点の記入時刻までの時間が予め設定された所定時間未満である場合にストロークがタップであると判定する方法（第１の方法）と、データ開始点とデータ終了点との間の距離が予め設定された所定距離未満である場合にストロークがタップであると判定する方法（第２の方法）とのいずれを採用してもよく、また、データ開始点とデータ終了点の時間及び距離の両方に条件を設定してもよい（第３の方法）。そして、タップ回数特定モジュール３０５は、最初に認識されたタップ情報から所定時間（例えば、０．５秒）以内に認識されたタップ情報の回数をカウントする。
【００６０】
処理データ抽出モジュール３０６は、情報登録モジュール３０２により情報記憶手段７０に登録されるユーザエリア、タップ回数、及び音声データを参照し、ユーザエリア認識モジュール３０４によって認識されたユーザエリアとタップ回数特定モジュール３０５によって特定されたタップ回数とに関連付けられた音声データを抽出する機能を有する。
【００６１】
音声出力モジュール３０７は、処理データ抽出モジュール３０６によって抽出された音声データを、スピーカ（音声出力部）１９に対して、音声として出力させる機能を有する。
【００６２】
データ通信モジュール３０８は、記入情報取得モジュール３０１の実行によって取得され情報記憶手段７０に記憶された記入情報を、端末装置８５に記憶、表示させるため、端末装置８５へ送信するモジュールである。またデータ通信モジュール３０８は、タップ回数に応じた所定の処理を端末装置８５に実行させるために、処理データ抽出モジュール３０６が抽出した処理データを、端末装置８５へ送信するように構成してもよい。
【００６３】
[ 本情報処理システムによる音声出力処理フロー ]
次に、本第１実施形態の情報処理システムにより行われる処理フローについて図５及び図１１を参照して説明する。図１１は、電子ペン８０Ａにおける音声出力処理のフローチャートである。
【００６４】
利用者は、電子ペン８０Ａのペン先部１７により、専用ペーパー（電子ペン用媒体）２０Ａのユーザエリアのうち解説を聞きたいユーザエリア、例えば、名前を記入する名前記入エリア６０をタップする（図５（ｂ）参照）。すると、記入情報取得手段７１により、電子ペン８０Ａは、ユーザエリアへのタップに対応する座標データ、時間情報、及び筆圧データを記入情報（タップ情報）として取得する（ステップＳ１）。
【００６５】
続いて、開始終了点特定手段７２は、記入情報取得手段７１によって取得された記入情報（タップ情報）に含まれるストロークのデータ開始点及びデータ終了点における座標データ及び記入時刻を特定する（ステップＳ２）。
【００６６】
そして、ユーザエリア認識手段７３は、記入情報（タップ情報）に含まれる座標データに基づいて、情報記憶手段７０が記憶した定義情報を参照することで、対応するユーザエリアに当たる名前記入エリア（エリアＩＤ「Ａ０１」）を認識する（ステップＳ３）。タップ回数特定手段７４は、データ開始点及びデータ終了点の記入時刻の差分に基づいて記入情報がタップ情報であることを判定すると共に、そのタップ情報に含まれる時間情報に基づいて、ユーザエリア認識手段７３が認識したユーザエリアへの所定時間内のタップ回数を特定する（ステップＳ４）。なお、タップ回数特定手段７４は、データ開始点及びデータ終了点の座標データから算出される距離に基づいて、電子ペン用媒体に記入されたストロークがタップであるか否かを判定してもよい。
【００６７】
さらに、処理データ抽出手段７５は、ユーザエリア認識手段７３によって認識されたユーザエリア及びタップ回数特定手段７４によって特定されたタップ回数に基づいて、情報記憶手段７０が記憶する出力情報を参照し、対応する音声データを抽出する（ステップＳ５）。そして、処理実行手段７６は、処理データ抽出手段７５によって抽出された音声データをスピーカ（音声出力部）１９に音声出力させる（ステップＳ６）。例えば、タップ回数特定手段７４によって特定されたタップ回数が１回であった場合、処理データ抽出手段７５は、図１０に示すユーザエリアのエリアＩＤ「Ａ０１」のタップ回数１回に対応する「音声データＡ（日本語）」を抽出し、処理実行手段７６は、日本語解説による音声データＡ「この欄は名前を記入する欄です」をスピーカ（音声出力部）１９に音声出力させる。また、タップ回数特定手段７４によって特定されたタップ回数が２回であった場合、処理データ抽出手段７５は、ユーザエリアのエリアＩＤ「Ａ０１」のタップ回数２回に対応する「音声データＢ（英語）」を抽出し、処理実行手段７６は、英語解説による音声データＢ「Column which fills in a name.」をスピーカ（音声出力部）１９に音声出力させる。
【００６８】
利用者は、スピーカ（音声出力部）１９によって再生出力される音声によりユーザエリアの解説を聞いて、ユーザエリアに必要事項を記入することができる。その記入内容は、電子ペン８０Ａによって記入情報としてメモリ１２に記憶される。
【００６９】
[ 本情報処理システムによる作用効果 ]
このように、ドットパターンを印刷した専用ペーパー２０Ａ上に所定の図案等を印刷することにより、専用ペーパー２０Ａを利用した各種電子ペン用帳票が生成できる。利用者が電子ペン８０Ａを使用して通常の要領で必要事項を記入すれば、電子ペン８０Ａは、専用アプリケーションを実行することにより、記入内容に対応するＸ，Ｙ座標データ等の記入情報を取得し、その記入情報に基づいて所定の処理を行うこととなる。したがって、利用者の電子ペン８０Ａによる専用ペーパー（電子ペン用媒体）２０Ａへの記入に対応して、電子ペン８０Ａの処理が即座に行われ、記入内容がリアルタイムに電子化されるため、利用者にとって操作性がよく作業効率が高くなるという効果がある。
【００７０】
また、この情報処理システムによれば、各種記入エリアを所定時間内にタップした回数によって電子ペン８０Ａにより日本語解説又は英語解説が音声で出力されるため、タップ回数を変えることで、各種異なる言語で音声出力させることができ、ヘルプ機能のためのユーザエリアを記入エリアとは別に設ける必要もなくなる。また、電子ペン８０Ａは、利用者によって同一のユーザエリアを所定時間内にタップされたタップ回数に応じて、音声データに基づく音声を出力することができ、音声データごとにユーザエリアを電子ペン用媒体に設定する必要もないため、図５に示すように集約した分の専用ペーパー２０Ａの面積を詰めることで電子ペン用媒体の省スペース化を実現することができる。これにより、デザインの自由度が増し、専用ペーパー２０Ａに印刷する文字や記入エリアを大きくすることが可能となり、専用ペーパー２０Ａをより見やすいデザインに設計することができる。
【００７１】
また、電子ペン８０Ａは利用者が専用ペーパー２０Ａ上に記述した文字などに対応する座標データ及び筆圧データを取得して所定の処理を実行する機能を有するが、電子ペン８０Ａのペン先部１７は通常のインクペンとなっているため、専用ペーパー２０Ａ上に記述した内容はオリジナルの原本として残すことができる。
【００７２】
なお、上記第１実施形態は次のように構成させることもできる。
【００７３】
例えば、情報記憶手段７０は、定義情報（図８参照）と出力情報（図１０参照）とを分けて記憶しているが、ユーザエリアのエリアＩＤに対して、エリア名、ユーザエリアの座標データ、タップ回数、音声データをまとめて関連付けて記憶させるようにしてもよく、これらの情報のデータ構造は任意に設定することができる。
【００７４】
また、上記第１実施形態では、電子ペン８０Ａのクロック２２は現在時刻を発信することとしているが（図２参照）、クロック２２は０から始まりストロークの記入中に経過していく記入時間を発信することとしてもよい。この場合、プロセッサ１１は、ストロークの記入中に、クロック２２が発信する経過時間（記入時間）を時間情報として取得し、その時間情報と、筆圧データと、Ｘ，Ｙ座標データとを関連付け、記入情報として取得する。
【００７５】
また、第１実施形態では、情報記憶手段７０に予め記憶されている音声データをスピーカ（音声出力部）１９に再生出力させたが、処理データ抽出手段７５によって再生出力すべきコンテンツを抽出し、処理実行手段７６によりそのコンテンツを音声合成して、スピーカ（音声出力部）１９に再生出力させるようにしてもよい。
【００７６】
また、上記第１実施形態における音声データは、各ユーザエリアを解説する文章を日本語又は英語に翻訳した音声データとしたが、他の言語による音声データを用いてもよい。また、図５に示すような名前記入エリア６０や住所記入エリア６１を有するデザインでなくともよく、例えば、他の記入項目を設けたり、記入欄のデザインや配置等も適宜変更してよい。
【００７７】
＜第２実施形態＞
次に、第２実施形態について説明する。第２実施形態と第１実施形態とが同様の部分については同じ符号を付し、適宜説明を省略する。上記第１実施形態では、図５に示すように、日本語又は英語によりユーザエリアの解説を音声で行うシステムに関するものであったが、第２実施形態は、図１２に示すように、専用ペーパー（電子ペン用媒体）２０Ｃ（２０）に記載された事象や地図の解説を、電子ペン８０Ｃ（８０）が「概要」、「より詳しく」、「とても詳しく」といった複数段階に分けて音声出力する地図ガイドに適用したものである。
【００７８】
図１２に示すように、専用ペーパー２０Ｃには図案等として地図が印刷されており、専用ペーパー２０Ｃの全体が１つのユーザエリアとなっている。第１実施形態では、電子ペン８０Ａの情報記憶手段７０には、ユーザエリアに対してタップ回数「１」・「２」が設定され、それぞれのタップ回数に音声データが関連付けられて記憶されていたが、本第２実施形態では、情報記憶手段７０には、「概要」・「より詳しく」・「もっと詳しく」に対応して、ユーザエリアに対してタップ回数「１」・「２」・「３」が設定されている。そして、タップ回数「１」には、専用ペーパー２０Ｃの地図に掲載されている、ある寺の概要的な説明「この寺は××年に建てられました。」という音声データが関連付けられて記憶されている。タップ回数「２」には、その寺のより詳しい説明「この寺は××年に建てられ、室町時代の主な建築手法が用いられた代表的な建築物です。」という音声データが関連付けられて記憶されている。タップ回数「３」には、その寺のもっと詳しい説明「この寺はＡ氏の命によって××年に建てられ、室町時代の主な建築手法が用いられています。△△年の戦争で半分焼けましたが、その後修復され、現在に至ります。」という音声データが関連付けられて記憶されている。
【００７９】
そして、処理データ抽出手段７５は、３つの音声データのうち、タップ回数特定手段７４によって特定された所定時間内のタップ回数に対応する音声データを情報記憶手段７０から抽出する。そして、処理実行手段７６は、抽出された音声データをスピーカ（音声出力部）１９に再生出力させる。
【００８０】
この第２実施形態によれば、電子ペン８０Ｃにより専用ペーパ２０Ｃが所定時間内にタップされた回数によって、電子ペン８０Ｃが、タップ回数に応じて段階的な解説を音声出力するため、複数段階の解説の音声出力の選択を１つのユーザエリアに集約することができ、解説の段階と同じ数のユーザエリアは必要ない。そのため、専用ペーパー２０Ｃの省スペース化を実現するとともに、デザイン自由度を向上させることが可能となる。
【００８１】
なお、第２実施形態において、１つのユーザエリアに対応付けされたタップ回数は、１〜３回であったが、タップ回数は任意に設定することができる。また、専用ペーパー２０Ｃ全体を１つのユーザエリアとし、電子ペン８０Ｃによって専用ペーパー２０Ｃのどこをタップしても音声出力されるように構成されているが、例えば、印刷された地図の建物部分をユーザエリアとし、電子ペン８０Ｃでその建物部分をタップすることで音声を出力する構成としてもよい。つまり、専用ペーパー２０Ｃにおけるユーザエリアの範囲や個数は任意に設定することができる。
【００８２】
＜第３実施形態＞
次に第３実施形態について図１３を参照して説明する。第３実施形態では、所定時間内のタップ回数によって、専用ペーパー（電子ペン用媒体）２０Ｄ（２０）に記載された楽譜（図示しない）を、電子ペン８０Ｄ（８０）が「一倍速」、「ニ倍速」、「三倍速」といった３段階の速度で再生して音声出力する。以下、第３実施形態と上記実施形態とが同様の部分については、同じ符号を付し、適宜説明を省略する。
【００８３】
第２実施形態では、情報記憶手段７０には、タップ回数「１」・「２」・「３」それぞれに、建築物を説明する異なる音声データが記憶されていたが、本第３実施形態では、再生速度ユーザエリア６２に対してタップ回数「１」・「２」・「３」に関連して、専用ペーパー２０Ｄに印刷された楽譜（図示しない）の一倍速の音声データ、ニ倍速の音声データ、三倍速の音声データが記憶されている。そして、処理データ抽出手段７５は、３つの異なる倍速の音声データのうち、タップ回数特定手段７４によって特定された所定時間内のタップ回数に対応する音声データを抽出する。そして、処理実行手段７６は、抽出された音声データをスピーカ（音声出力部）１９に再生出力させる。
【００８４】
このように、第３実施形態では、図１３に示すように、電子ペン８０Ｄにより、所定時間内にタップした回数によって、電子ペン８０Ｄが「一倍速」から「三倍速」までの各段階の速度で再生した音声を出力させるため、専用ペーパー２０Ｄへのタップ回数を変えることで、異なる再生速度の音声データを再生させることができ、しかも、複数段階の速度で再生した音声出力の選択を１つのユーザエリアに集約することができる。したがって、速度の段階と同じ数のユーザエリアは必要ない。そのため、専用ペーパー２０Ｄの省スペース化を実現するとともに、デザイン自由度を向上させることが可能となる。
【００８５】
なお、第３実施形態では、音声データを、楽譜に対応する各段階の速度の音声データとしたが、楽譜の音楽に代えて、ディクテーション問題や音声読み上げツール等、様々な音声データを適用することができる。また、第３実施形態では、異なる速度の音声データを情報記憶手段７０に記憶させたが、１つのユーザエリアに対して情報記憶手段７０に記憶させる音声データを一つとし、処理実行手段７６がタップ回数に応じてその音声データの再生速度を変えて再生させるようにしてもよい。この場合、電子ペン８０Ｄは、上記音声出力処理により認識したユーザエリア及び特定したタップ回数に基づいて出力情報から抽出した再生プログラムを実行し、予め有する楽譜に対応する音声データを任意の段階の速度で再生することで、所定時間内のタップ回数に応じ、各段階の速度で再生した音声を出力することができる。そのため、同じ音声データを専用ペーパー２０Ｄへのタップ回数を変えることで、再生速度を変えて音声データを再生させることができる。
【００８６】
＜第４実施形態＞
次に、第４実施形態について図１４〜図１７を参照して説明する。上記第１乃至第３実施形態では、電子ペン８０のスピーカ（音声出力部）１９から音声を出力するシステムに関するものであったが、本第４実施形態は、電子ペン８０Ｅと通信可能な端末装置８５にデータを送信することで端末装置８５の表示部９０に画像を表示するシステムに関するものである。本第４実施形態は、電子ペン８０Ｅによる所定時間内のタップ回数に応じて画像を出力する教育ドリル、図鑑等にも適用できるものである。以下、本第４実施形態と上記の実施形態とが同様の部分については、同じ符号を付し、適宜説明を省略する。
【００８７】
図１４は、第４実施形態の使用形態を示す図である。図１５は、第４実施形態における専用アプリケーション５６の内部構成を示す。図１６は、第４実施形態における出力情報のデータ構造を模式的に示す図である。図１７は、画像出力処理のフローチャートである。
【００８８】
第４実施形態の情報処理システムは、図１４に示すように、電子ペン８０Ｅ（８０）と、専用ペーパー（電子ペン用媒体）２０Ｅ（２０）と、端末装置８５とから構成される。ここで、端末装置８５について説明する。端末装置８５は、ハードウェアとして、電子ペン８０Ｅとのデータ通信が可能なアンテナ装置、ＣＰＵ等のプロセッサ、ＲＯＭやＲＡＭといったメモリ、スピーカ、ディスプレイ等で構成される、ＰＣや携帯電話、或いは携帯端末である。本第４実施形態において端末装置８５は、電子ペン８０Ｅからデータを取得し、データに基づいてディスプレイ等の表示部９０に画像を表示する。
【００８９】
図１４に示すように、専用ペーパー２０Ｅには、蛙の親子関係と記載された１つの画像出力ユーザエリア６３が設定されている。図１６に示すように、情報記憶手段７０には、画像出力ユーザエリア６３に対応してタップ回数「１」・「２」が設定されており、タップ回数「１」には、蛙の画像データ（処理データ）Ａが関連付けられて記憶されており、タップ回数「２」には、おたまじゃくしの画像データ（処理データ）Ｂが関連付けられて記憶されている。そして、処理データ抽出手段７５は、２つの画像データのうち、タップ回数特定手段７４によって特定された所定時間内のタップ回数に対応する画像データを抽出する。そして、処理実行手段７６は、抽出された画像データをデータ通信ユニット１３から端末装置８５へ送信する。端末装置８５は、取得した画像データに基づいて表示部（ディスプレイ）９０に画像を表示させる。
【００９０】
このような第４実施形態における画像出力処理を実行する専用アプリケーションについて図１５を参照して説明する。図１５は、専用アプリケーション５６のモジュール構成を示す。専用アプリケーション５６は、電子ペン８０Ｅが専用ペーパー２０Ｅに記入した内容に対応するデジタルデータである記入情報に基づいて所定の処理を実行するものであって、予め電子ペン８０Ｅにインストールされている。
【００９１】
図１５に示すように、専用アプリケーション５６は、記入情報取得モジュール４０１、情報登録モジュール４０２、開始終了点特定モジュール４０３、ユーザエリア認識モジュール４０４、タップ回数特定モジュール４０５、処理データ抽出モジュール４０６及びデータ通信モジュール４０７を有する。
【００９２】
記入情報取得モジュール４０１は、記入情報取得手段７１を用いて、専用ペーパー２０Ｅへの電子ペン８０Ｅによる記入に対応する記入情報（タップ情報を含む）を取得する機能を有するモジュールである。
【００９３】
情報登録モジュール４０２は、情報記憶手段７０に対して、図１６に示すように、ユーザエリアのエリアＩＤ、ユーザエリアの座標データ、タップ回数、及び画像データを関連付けて記憶させるモジュールである。なお、エリアＩＤ「Ｂ０１」のタップ回数「１」に対しては、蛙の画像データＡが関連付けられて記憶されており、同じエリアＩＤ「Ｂ０１」のタップ回数「２」に対しては、おたまじゃくしの画像データＢが関連付けられて記憶されている。なお、定義情報については、第１実施形態の図８と同様に、エリアＩＤ「Ｂ０１」…に対して座標データ等が記憶されている。
【００９４】
開始終了点特定モジュール４０３は、記入情報取得モジュール４０１の実行によって取得された記入情報に含まれるストロークのデータ開始点及びデータ終了点につき、それぞれの座標データ及び記入時刻を特定する機能を有する。
【００９５】
ユーザエリア認識モジュール４０４は、記入情報に含まれる座標データと、情報登録モジュール４０２によって登録される各ユーザエリアの座標データとを参照して、記入情報に対応するユーザエリアを認識する機能を有する。なお、ユーザエリア認識モジュール４０４は、１つのストロークデータのデータ開始点及びデータ終了点の双方が含まれるユーザエリアのみを認識するようにするとよい。
【００９６】
タップ回数特定モジュール４０５は、ユーザエリア認識モジュール４０４によって認識された記入情報がタップ情報であるか否か判定し、ユーザエリアへの所定時間内におけるタップ回数をカウントする機能を有する。記入情報がタップ情報であるか否かの判定方法としては、第１実施形態と同様に、データ開始点の記入時刻からデータ終了点の記入時刻までの時間が予め設定された所定時間未満である場合にストロークがタップであると判定する方法（第１の方法）と、データ開始点とデータ終了点との間の距離が予め設定された所定距離未満である場合にストロークがタップであると判定する方法（第２の方法）とのいずれを採用してもよく、また、データ開始点とデータ終了点の時間及び距離の両方に条件を設定してもよい（第３の方法）。そして、タップ回数特定モジュール２０６は、最初に認識されたタップ情報から所定時間（例えば、０．５秒）以内に認識されたタップ情報の回数をカウントする。
【００９７】
処理データ抽出モジュール４０６は、情報登録モジュール４０２により情報記憶手段７０に登録されるユーザエリア、タップ回数、及び画像データを参照し、ユーザエリア認識モジュール４０４によって認識されたユーザエリアとタップ回数特定モジュール４０５によって特定されたタップ回数とに関連付けられた画像データを抽出する機能を有する。
【００９８】
データ通信モジュール４０７は、処理データ抽出モジュール４０６によって抽出された画像データをデータ通信ユニット１３から端末装置８５へ送信する機能を有する。またデータ通信モジュール４０７は、記入情報取得モジュール４０１の実行によって取得され情報記憶手段７０に記憶された記入情報を、端末装置８５に記憶、表示させるため、端末装置８５へ送信する機能を有する。
【００９９】
[ 画像出力処理フロー ]
次に、第４実施形態における画像出力処理について、図１４及び図１７を参照して説明する。図１７は、電子ペン８０Ｅにおける画像出力処理のフローチャートである。
【０１００】
利用者は、電子ペン８０Ｅのペン先部１７により、専用ペーパー２０Ｅを構成するユーザエリアのうち画像を出力させたいユーザエリア、例えば、画像出力ユーザエリア６３をタップする。すると、電子ペン８０Ｅは、記入情報取得手段７１により、ユーザエリアへのタップに対応する座標データ、時間情報、及び筆圧データを記入情報（タップ情報）として取得する(ステップＳ２１）。さらに、開始終了点特定手段７２は、記入情報取得手段７１によって取得された記入情報（タップ情報）に含まれるストロークのデータ開始点及びデータ終了点における座標データ及び記入時刻を特定する（ステップＳ２２）。
【０１０１】
そして、ユーザエリア認識手段７３は、記入情報（タップ情報）に含まれる座標データに基づいて、情報記憶手段７０が記憶した定義情報を参照することで、対応するユーザエリアを認識する（ステップＳ２３）。タップ回数特定手段７４は、データ開始点及びデータ終了点の記入時刻の差分に基づいて、記入情報がタップ情報であることを判定すると共に、そのタップ情報に含まれる時間情報に基づいて、ユーザエリア認識手段７３が認識したユーザエリアへの所定時間内のタップ回数を特定する（ステップＳ２４）。なお、タップ回数特定手段７４は、データ開始点及びデータ終了点の座標データから算出される距離に基づいて、電子ペン用媒体に記入されたストロークがタップであるか否かを判定してもよい。
【０１０２】
さらに、処理データ抽出手段７５は、ユーザエリア認識手段７３によって認識されたユーザエリア及びタップ回数特定手段７４によって特定されたタップ回数に基づいて、情報記憶手段７０が記憶した出力情報から対応する画像データを抽出する（ステップＳ２５）。そして、処理実行手段７６は、処理データ抽出手段７５によって抽出された画像データをデータ通信ユニット１３から端末装置８５へ送信する（ステップＳ２６）。端末装置８５は、取得した画像データに基づいて表示部（ディスプレイ）９０に画像を表示させる。例えば、図１６に示すような出力情報であって、認識したユーザエリアのエリアＩＤが「Ｂ０１」、特定したタップ回数が「１」の場合、処理データ抽出手段７５は、蛙の画像データＡを抽出し、処理実行手段７６は、抽出した蛙の画像データＡをデータ通信ユニット１３から端末装置８５に送信する。これにより、端末装置８５は、蛙の画像を表示部９０に表示させる。また、特定したタップ回数が「２」であった場合、処理データ抽出手段７５は、おたまじゃくしの画像データＢを抽出し、処理実行手段７６は、抽出したおたまじゃくしの画像データＢをデータ通信ユニット１３から端末装置８５に送信する。これにより、端末装置８５は、おたまじゃくしの画像を表示部９０に表示させる。
【０１０３】
第４実施形態によれば、電子ペン８０Ｅによりユーザエリアを所定時間内にタップした回数によって、複数の画像を端末装置８５へ送信することができるため、利用者が同一のユーザエリアに対してタップ回数を変えてタップを行うことにより、関連する画像データを端末装置８５の表示部９０に表示させることができ、ユーザエリアに関する内容についての理解がしやすくなる。また、複数の画像から出力させる画像の選択を１つのユーザエリアに集約することができ、出力する画像と同じ数のユーザエリアは必要なくなる。よって、専用ペーパー２０Ｅの省スペース化を実現するとともに、デザイン自由度を向上させることが可能となる。
【０１０４】
なお、第４実施形態では、画像出力ユーザエリア６３に対して関連する画像データは、親子関係にあるおたまじゃくしの画像データと蛙の画像データであったが、これに限られず、例えば、物質の化学構造式の画像データと表面の画像データと顕微鏡観察による画像データとの組合せ、地図上のある地点またはランドマークを複数の方向から見た場合の画像データの組合せ、あるいは建築物の外観の画像データと内装の画像データと設計図の画像データとの組合せ等が挙げられる。また、画像データではなく、テキストデータであってもよい。このように、第４実施形態は、学習教材、各種ガイドブック、商品案内等に適用することができる。
【０１０５】
上述したように、上記第１〜第４実施形態によれば、同一の専用ペーパー（電子ペン用媒体）２０又は同一のユーザエリアを所定時間内にタップした回数によって、音声、画像といった異なる情報を利用者にフィードバックすることが可能となる。つまり、所定時間内のタップ回数に応じて出力する音声データ又は画像データを決定することで、専用ペーパー（電子ペン用媒体）２０上におけるユーザエリアを集約することができる。
【０１０６】
なお、本発明は、上記第１〜第４実施形態に限られない。
【０１０７】
上記実施形態では、音声や画像を利用者にフィードバックするよう構成したが、所定の処理を実行する例として、タップ回数に応じて異なるプログラム又はソフトウェアを実行するようにしてもよく、或いは、外部の端末装置８５に、動画再生、プログラム又はソフトウェアを実行させるようにしてもよい。例えば、ショッピングカタログとして、１つの商品欄（ユーザエリア）に対して、タップ回数「１」では、色やサイズのバリエーションを端末装置８５のディスプレイ９０に表示させ、タップ回数「２」では、使用例の動画を再生させるといった実施形態が可能である。また、問題集として、１つの出題解答欄（ユーザエリア）に対して、タップ回数「１」では、問題を電子ペン８０のスピーカ１９に出力し又は端末装置８５のディスプレイ９０に表示させ、タップ回数「２」では、答え合わせ（解答欄への記入情報を文字認識して解答と照合し、○、×等の判定結果を電子ペン８０のスピーカ１９に出力し又は端末装置８５のディスプレイ９０に表示させる）を行い、タップ回数「３」では、解説を電子ペン８０のスピーカ１９に出力し又は端末装置８５のディスプレイ９０に表示させる、といった実施形態も可能である。
【０１０８】
また、専用ペーパー２０上のエリアは大きく２種類のエリアに分けることとしてもよい。１つは記入エリアであり、電子ペン８０による記述内容をそのまま情報として取り扱うエリアである。もう１つは、機能エレメントであり、対応するエリア内を電子ペン８０でチェックした際に、予めそのエリアに対して定義されているアクション、処理、指示などを実行するようになっている。例えば、送信ボックスがこれに該当する。送信ボックスは、電子ペン８０内に記憶されている所定のデータを近傍の端末装置８５へ送信するための指示を行う際に使用される。利用者が送信ボックス内に電子ペン８０でチェックを入れると、電子ペン８０が送信ボックス内のドットパターンを読み取る。当該パターンは送信指示に対応付けられており、電子ペン８０内のプロセッサ１１はデータ通信ユニット１３に所定のデータの送信命令を発する。電子ペン８０は、データの送信完了を振動により示すことができる。
【０１０９】
また、電子ペン８０の標準機能によれば、電子ペン８０により得られるデータは、原則として座標データの形態であり、テキストデータではない。但し、電子ペン８０は標準機能として、座標データに基づいて、電子ペン８０により専用ペーパー２０に記入された内容をテキスト化する機能を備えることとしてもよい。
【０１１０】
また、電子ペン８０内に、ペン自体又はその所有者に関するプロパティ情報（ペン情報又はペン所有者情報）を保持しておき、端末装置８５から参照することができるようにしてもよいし、プロパティ情報の全部又は一部を端末装置８５に送信するようにしてもよい。ペン情報としては、バッテリーレベル、ペンＩＤ、ペン製造者番号、ペンソフトウェアのバージョン、サブスクリプションプロバイダのＩＤ、空きメモリ容量などが挙げられる。また、ペン所有者情報としては、国籍、言語、タイムゾーン、emailアドレス、名称、住所、ファックス／電話番号、携帯電話番号などが挙げられる。
【０１１１】
また、上記実施形態では、ドットは赤外線を吸収するカーボンを含むインクとし、電子ペン８０のＬＥＤ１５を、赤外線を照射するＬＥＤとし、カメラ１６によって赤外線の反射量の差によって、電子ペン８０でドットパターンを読み取っていたが、これに限らない。例えば、ドットは所定波長の光によって所定波長を発光するインクとし、電子ペン８０のＬＥＤ１５を、ドットのインクを発光させる光を照射するものとし、カメラ１６によってドットのインクが発光する波長の領域を検知することによって、電子ペン８０でドットパターンを読み取るようにしてもよく、カメラ１６によってドットパターンが読み取れれば、ドットのインクの種別やＬＥＤ１５の照射光等は上記実施形態で示したものに限られない。また、専用ペーパー２０における位置座標が特定できるものであれば、ドットパターンの代わりに、別のコード化されたパターン、例えば、２次元コードパターンなどであってもよい。
【０１１２】
また、ドットパターンの割り当ては、通常、用紙の用途毎に行われるが、専用ペーパー２０を商業印刷機により大量印刷するような場合には、同一種類の電子ペン用媒体には同じドットパターンが印刷されることになる。この場合、同一種類の電子ペン用媒体を１枚１枚区別するため、電子ペン用媒体には、各媒体を識別する識別情報を記入するための識別情報記入欄を設けるとよい。電子ペン８０において、取得した記入情報に基づいて、文字認識により識別情報記入欄に記入された識別情報を特定し、当該記入情報と対応付けて記憶しておけば、同種の電子ペン用媒体を１枚１枚区別することができる。この他、ペンＩＤを当該識別情報と共に当該記入情報と対応付けて記憶することとしてもよい。これにより、電子ペン８０は、記憶した識別情報もしくは識別情報とペンＩＤに基づいて、各電子ペン用媒体を識別することができる。他方、プリンタにより印刷する場合には、用紙１枚１枚に異なるドットパターンを割り当てて、専用ペーパー２０を印刷することも可能である。この場合、各専用ペーパー２０に印刷されたドットパターンは、専用ペーパー２０毎に異なるため、ドットパターンによって専用ペーパー２０を１枚１枚識別し区別することができる。
【産業上の利用可能性】
【０１１３】
本発明は、電子ペン用媒体から構成される辞書類、ヘルプ機能を有する各種申込書、学習教材、演奏コントローラ、ガイド付き地図等、様々な分野で利用することができる。
【図面の簡単な説明】
【０１１４】
【図１】電子ペンの使用形態を模式的に示す図である。
【図２】第１実施形態における電子ペンの構造を示すブロック図である。
【図３】専用ペーパーに印刷されたドットパターンによる情報の表現方法を説明する図である。
【図４】（ａ）は、ドットパターンを模式的に示し、（ｂ）は、それに対応する情報の例を示す図である。
【図５】（ａ）は、第１実施形態における電子ペン用媒体を示し、（ｂ）は、その使用形態を示す図である。
【図６】電子ペンの主要な構成を示す機能ブロック図である。
【図７】第１実施形態における専用アプリケーションのモジュール構成図である。
【図８】定義情報のデータ構造を模式的に示す図である。
【図９】座標データを説明する図である。
【図１０】出力情報のデータ構造を模式的に示す図である。
【図１１】第１実施形態における音声出力処理のフローチャートである。
【図１２】第２実施形態における専用ペーパー及びその使用形態を示す図である。
【図１３】第３実施形態における専用ペーパー及びその使用形態を示す図である。
【図１４】第４実施形態における専用ペーパー及びその使用形態を示す図である。
【図１５】第４実施形態における専用アプリケーションのモジュール構成図である。
【図１６】第４実施形態における出力情報のデータ構造を模式的に示す図である。
【図１７】第４実施形態における画像出力処理のフローチャートである。
【符号の説明】
【０１１５】
１１…プロセッサ、１２…メモリ、１３…データ通信ユニット、１４…バッテリー、１５…ＬＥＤ、１６…カメラ、１８…圧力センサ、１９…スピーカ、２０，２０Ａ，２０Ｃ〜２０Ｅ…専用ペーパー（電子ペン用媒体）、２２…クロック、５５，５６…専用アプリケーション、６０…名前記入エリア（ユーザエリア）、６１…住所記入エリア（ユーザエリア）、６２…再生速度ユーザエリア、６３…画像出力ユーザエリア、７０…情報記憶手段、７１…記入情報取得手段、７２…開始終了点特定手段、７３…ユーザエリア認識手段、７４…タップ回数特定手段、７５…処理データ抽出手段、７６…処理実行手段、８０，８０Ａ，８０Ｃ〜８０Ｅ…電子ペン、８５…端末装置、９０…ディスプレイ（表示部）
【図１】
2008152547.tif 000003
【図２】
2008152547.tif 000004
【図３】
2008152547.tif 000005
【図４】
2008152547.tif 000006
【図５】
2008152547.tif 000007
【図６】
2008152547.tif 000008
【図７】
2008152547.tif 000009
【図８】
2008152547.tif 000010
【図９】
2008152547.tif 000011
【図１０】
2008152547.tif 000012
【図１１】
2008152547.tif 000013
【図１２】
2008152547.tif 000014
【図１３】
2008152547.tif 000015
【図１４】
2008152547.tif 000016
【図１５】
2008152547.tif 000017
【図１６】
2008152547.tif 000018
【図１７】
2008152547.tif 000019