(57)【特許請求の範囲】
【請求項１】
一の情報表示媒体に対してなされた複数の筆記の属性情報を記憶する記憶手段と、
前記記憶手段に記憶された前記複数の筆記の属性情報の中から、所定の属性情報が予め定められた条件を満たす場合に、当該属性情報を抽出する抽出手段と、
前記抽出手段により抽出された前記属性情報を有する筆記の内容を示す筆記情報を、前記一の情報表示媒体に対してなされた複数の筆記情報の中から取得する取得手段とを備え、
前記属性情報は、筆記がなされた前記一の情報表示媒体における位置を示す位置情報であり、
前記抽出手段は、前記記憶手段に記憶された前記位置情報が、予め定めた基準を超えた量の筆記がなされた前記一の情報表示媒体における領域内の位置を示す場合に、当該位置情報を抽出し、
前記位置情報は、前記予め定めた基準を超えた量の筆記がなされた領域内の位置を示す第１の位置情報と、前記予め定めた基準を超えた量の筆記がなされていない領域内の位置を示す第２の位置情報とを含み、
前記取得手段は、前記記憶手段に記憶された前記第１の位置情報と前記第２の位置情報とを連結して得られた前記筆記情報を取得することを特徴とする筆記情報処理装置。
【請求項２】
前記属性情報は、筆記に用いられた電子筆記具の所有者に関する所有者情報であり、
前記抽出手段は、前記記憶手段に記憶された前記所有者情報が予め定めた条件を満たす場合に、当該所有者情報を抽出することを特徴とする請求項１に記載の筆記情報処理装置。
【請求項３】
前記属性情報は、筆記がなされた時間帯を示す時間帯情報であり、
前記抽出手段は、前記記憶手段に記憶された前記時間帯情報が、予め定めた基準を超えた量の筆記がなされた時間帯を示す場合に、当該時間帯情報を抽出することを特徴とする請求項１に記載の筆記情報処理装置。
【請求項４】
前記取得手段により取得された前記筆記情報を、前記一の情報表示媒体に印刷された印刷情報に重畳して表示するための表示情報を生成する生成手段を更に備えたことを特徴とする請求項１乃至３の何れかに記載の筆記情報処理装置。
【請求項５】
一の情報表示媒体に対してなされた複数の筆記の属性情報を管理する管理装置と、
筆記の内容を画像化した筆記画像を出力する出力装置と
を備え、
前記管理装置は、
一の情報表示媒体における筆記がなされた位置を示す位置情報を取得する取得手段と、
前記一の情報表示媒体において、筆記がなされた複数の領域から、予め定められた基準を超えた量の筆記がなされた領域に含まれる、前記取得手段により取得された複数の前記位置情報を抽出する抽出手段と、
前記抽出手段により抽出された複数の前記位置情報を連結し、ストローク単位で筆記情報を生成する生成手段と、
前記生成手段により生成された前記筆記情報を送信する送信手段と
を備え、
前記出力装置は、
前記送信手段により送信された前記筆記情報を受信する受信手段と、
前記受信手段により受信された前記筆記情報に基づいて、前記筆記画像を出力する出力手段と
を備えたことを特徴とする筆記情報処理システム。
【請求項６】
コンピュータに、
一の情報表示媒体に対してなされた複数の筆記の属性情報を記憶手段に記憶する機能と、
一の情報表示媒体における筆記がなされた位置を示す位置情報を取得する機能と、
前記記憶手段に記憶された前記複数の筆記の属性情報の中から、前記一の情報表示媒体において、筆記がなされた複数の領域から、予め定められた基準を超えた量の筆記がなされた領域に含まれる、前記取得する機能により取得された複数の前記位置情報を抽出する機能と、
前記抽出する機能により抽出された複数の前記位置情報を連結し、ストローク単位で筆記情報を生成する機能と
を実現させるためのプログラム。
【請求項７】
一の情報表示媒体における筆記がなされた位置を示す位置情報を取得する取得手段と、
前記一の情報表示媒体において、筆記がなされた複数の領域から、予め定められた基準を超えた量の筆記がなされた領域に含まれる、前記取得手段により取得された複数の前記位置情報を抽出する抽出手段と、
前記抽出手段により抽出された複数の前記位置情報を連結し、ストローク単位で筆記情報を生成する生成手段と
を有する筆記情報処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、筆記情報処理装置、筆記情報処理システム、プログラムに関する。
【背景技術】
【０００２】
参加者間での共同ドキュメント書込みを可能にする技術が知られている（例えば、特許文献１参照）。この特許文献１の技術では、参加者に少なくとも１つのドキュメント書込みフォームを提供し、コンピュータシステムにおいて、ドキュメント書込みセッションに参加している参加者が操作する検出デバイスから表示データを受信し、コンピュータシステムにおいて又表示データから、ドキュメント書込みセッションに関する少なくとも１つのパラメータを識別し、参加者から遠隔にいる少なくとも１人の他の参加者に、少なくとも１つのパラメータを表す情報を含む少なくとも１つのドキュメント書込みフォームを提供している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特表２００３−５０４７１６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
本発明の目的は、媒体に対してなされた筆記の中から重要な筆記を抽出できる可能性を高めることにある。
【課題を解決するための手段】
【０００５】
請求項１に記載の発明は、一の情報表示媒体に対してなされた複数の筆記の属性情報を記憶する記憶手段と、前記記憶手段に記憶された前記複数の筆記の属性情報の中から、所定の属性情報が予め定められた条件を満たす場合に、当該属性情報を抽出する抽出手段と、前記抽出手段により抽出された前記属性情報を有する筆記の内容を示す筆記情報を、前記一の情報表示媒体に対してなされた複数の筆記情報の中から取得する取得手段とを備え、前記属性情報は、筆記がなされた前記一の情報表示媒体における位置を示す位置情報であり、前記抽出手段は、前記記憶手段に記憶された前記位置情報が、予め定めた基準を超えた量の筆記がなされた前記一の情報表示媒体における領域内の位置を示す場合に、当該位置情報を抽出し、前記位置情報は、前記予め定めた基準を超えた量の筆記がなされた領域内の位置を示す第１の位置情報と、前記予め定めた基準を超えた量の筆記がなされていない領域内の位置を示す第２の位置情報とを含み、前記取得手段は、前記記憶手段に記憶された前記第１の位置情報と前記第２の位置情報とを連結して得られた前記筆記情報を取得することを特徴とする筆記情報処理装置である。
請求項２に記載の発明は、前記属性情報は、筆記に用いられた電子筆記具の所有者に関する所有者情報であり、前記抽出手段は、前記記憶手段に記憶された前記所有者情報が予め定めた条件を満たす場合に、当該所有者情報を抽出することを特徴とする請求項１に記載の筆記情報処理装置である。
請求項３に記載の発明は、前記属性情報は、筆記がなされた時間帯を示す時間帯情報であり、前記抽出手段は、前記記憶手段に記憶された前記時間帯情報が、予め定めた基準を超えた量の筆記がなされた時間帯を示す場合に、当該時間帯情報を抽出することを特徴とする請求項１に記載の筆記情報処理装置である。
請求項４に記載の発明は、前記取得手段により取得された前記筆記情報を、前記一の情報表示媒体に印刷された印刷情報に重畳して表示するための表示情報を生成する生成手段を更に備えたことを特徴とする請求項１乃至３の何れかに記載の筆記情報処理装置である。
請求項５に記載の発明は、一の情報表示媒体に対してなされた複数の筆記の属性情報を管理する管理装置と、筆記の内容を画像化した筆記画像を出力する出力装置とを備え、前記管理装置は、一の情報表示媒体における筆記がなされた位置を示す位置情報を取得する取得手段と、前記一の情報表示媒体において、筆記がなされた複数の領域から、予め定められた基準を超えた量の筆記がなされた領域に含まれる、前記取得手段により取得された複数の前記位置情報を抽出する抽出手段と、前記抽出手段により抽出された複数の前記位置情報を連結し、ストローク単位で筆記情報を生成する生成手段と、前記生成手段により生成された前記筆記情報を送信する送信手段とを備え、前記出力装置は、前記送信手段により送信された前記筆記情報を受信する受信手段と、前記受信手段により受信された前記筆記情報に基づいて、前記筆記画像を出力する出力手段とを備えたことを特徴とする筆記情報処理システムである。
請求項６に記載の発明は、コンピュータに、一の情報表示媒体に対してなされた複数の筆記の属性情報を記憶手段に記憶する機能と、一の情報表示媒体における筆記がなされた位置を示す位置情報を取得する機能と、前記記憶手段に記憶された前記複数の筆記の属性情報の中から、前記一の情報表示媒体において、筆記がなされた複数の領域から、予め定められた基準を超えた量の筆記がなされた領域に含まれる、前記取得する機能により取得された複数の前記位置情報を抽出する機能と、前記抽出する機能により抽出された複数の前記位置情報を連結し、ストローク単位で筆記情報を生成する機能とを実現させるためのプログラムである。
請求項７に記載の発明は、一の情報表示媒体における筆記がなされた位置を示す位置情報を取得する取得手段と、前記一の情報表示媒体において、筆記がなされた複数の領域から、予め定められた基準を超えた量の筆記がなされた領域に含まれる、前記取得手段により取得された複数の前記位置情報を抽出する抽出手段と、前記抽出手段により抽出された複数の前記位置情報を連結し、ストローク単位で筆記情報を生成する生成手段と、を有する筆記情報処理装置である。
【発明の効果】
【０００６】
請求項１の発明によれば、基準を超えた量の筆記がなされた領域と基準を超えた量の筆記がなされていない領域とに跨る筆記情報を取得することができる。
請求項２の発明によれば、筆記に用いられた電子筆記具の所有者に関する情報によって決定された筆記を重要な筆記として抽出することができる。
請求項３の発明によれば、基準を超えた量の筆記がなされた時間帯における筆記を重要な筆記として抽出することができる。
請求項４の発明によれば、重要な筆記と一の情報表示媒体における印刷情報とを合成して見せることができる。
請求項５〜７の発明によれば、基準を超えた量の筆記がなされた領域内の筆記を抽出することができる。
【図面の簡単な説明】
【０００７】
【図１】本発明の実施の形態が適用されるコンピュータシステムの構成例を示した図である。
【図２】本発明の実施の形態における文書サーバの機能構成例を示したブロック図である。
【図３】本発明の実施の形態における識別情報サーバの機能構成例を示したブロック図である。
【図４】本発明の実施の形態における印刷文書出力時の動作例を示したシーケンス図である。
【図５】本発明の実施の形態で生成される符号画像の例を示した図である。
【図６】本発明の実施の形態で記憶される媒体管理情報の例を示した図である。
【図７】本発明の実施の形態におけるデジタルペンの構成例を示した図である。
【図８】本発明の実施の形態におけるデジタルペンの制御回路の機能構成例を示したブロック図である。
【図９】本発明の実施の形態における会議サーバの機能構成例を示したブロック図である。
【図１０】本発明の実施の形態における印刷文書への筆記時の動作例を示したシーケンス図である。
【図１１】本発明の実施の形態で用いられるユーザ情報の例を示した図である。
【図１２】本発明の実施の形態で用いられる筆跡管理情報の例を示した図である。
【図１３】本発明の実施の形態において筆跡情報を表示する端末装置の機能構成例を示したブロック図である。
【図１４】本発明の実施の形態における筆跡情報の表示時の動作例を示したシーケンス図である。
【図１５】本発明の実施の形態における第１の筆跡情報合成処理の動作例を示したフローチャートである。
【図１６】本発明の実施の形態における第２の筆跡情報合成処理の動作例を示したフローチャートである。
【図１７】本発明の実施の形態における第３の筆跡情報合成処理の動作例を示したフローチャートである。
【図１８】本発明の実施の形態における筆跡情報の合成結果の第１の表示例を示した図である。
【図１９】本発明の実施の形態における筆跡情報の合成結果の第２の表示例を示した図である。
【図２０】本発明の実施の形態を実現可能なコンピュータのハードウェア構成例を示した図である。
【発明を実施するための形態】
【０００８】
以下、添付図面を参照して、本発明の実施の形態について詳細に説明する。
まず、本実施の形態におけるコンピュータシステムの全体構成について説明する。
図１は、本実施の形態のコンピュータシステムの構成例を示したものである。
図示するように、このコンピュータシステムは、端末装置１０と、文書サーバ２０と、識別情報サーバ３０と、画像形成装置４０と、端末装置５０と、会議サーバ７０とがネットワーク８０に接続されることにより構成されている。また、端末装置５０には、デジタルペン６０が通信装置５５を介して接続されている。
【０００９】
端末装置１０は、文書サーバ２０に対して電子文書の印刷を要求するコンピュータ装置である。ここで、端末装置１０としては、例えば、パーソナルコンピュータやワークステーション、その他のコンピュータを用いるとよい。
文書サーバ２０は、電子文書を記憶し管理するコンピュータ装置である。また、端末装置１０から電子文書の印刷要求があると、電子文書の画像と、識別情報及び位置情報を表す符号画像とを生成し、これらを合成した合成画像を媒体に印刷する印刷命令を画像形成装置４０に対して出力する。この場合、識別情報とは、媒体を一意に特定するための情報であり、位置情報とは、媒体上の座標位置を特定するための情報である。ここで、文書サーバ２０としては、例えば、パーソナルコンピュータやワークステーション、その他のコンピュータを用いるとよい。
【００１０】
識別情報サーバ３０は、媒体に付与する識別情報を発行するコンピュータ装置である。そして、発行した識別情報を、その識別情報が付与される媒体に印刷される電子文書と関連付けて記憶する。ここで、識別情報サーバ３０としては、例えば、パーソナルコンピュータやワークステーション、その他のコンピュータを用いるとよい。
画像形成装置４０は、媒体に画像を印刷し、印刷文書として出力する装置である。この画像形成装置４０は、プリンタの機能のみを備えたものであってもよいし、他にスキャナやファクシミリの機能を備えたものであってもよい。ここで、画像形成装置４０における画像形成方式としては、例えば、電子写真方式を用いるとよいが、その他の方式を用いてもよい。尚、以下では、媒体に付与する識別情報を識別情報サーバ３０が発行するものとして説明するが、システム内で重複なく発行できるのであれば識別情報はどの装置で発行してもよく、この画像形成装置４０で発行するようにしてもよい。その場合は、例えば、画像形成装置４０の機械番号と画像形成装置４０におけるプリントカウントの値とを結合したものを識別情報として用いるとよい。
【００１１】
端末装置５０は、印刷文書に対する筆記を電子化した情報（以下、「筆跡情報」という）を、印刷文書に記録された画像の元となる電子文書に反映させるために会議サーバ７０に送信するコンピュータ装置であり、出力装置の一例である。また、筆跡情報を反映する対象の電子文書をディスプレイに表示し、その上に筆跡情報を重ねて表示するようにしてもよい。ここで、端末装置５０としては、例えば、パーソナルコンピュータやワークステーション、その他のコンピュータを用いるとよい。尚、本実施の形態では、筆記の内容を示す筆記情報の一例として、筆跡情報を用いている。また、筆跡情報を主に手書き情報として説明するが、これに限らず、例えば、建築や機械等の図面データを出力する装置であるプロッタ等によって機械的に描画された情報であってもよい。
【００１２】
通信装置５５は、デジタルペン６０から筆跡情報を取得して端末装置５０に送信する装置である。例えば、デジタルペン６０を差し込む差込口を設け、この差込口にデジタルペン６０が差し込まれると、デジタルペン６０に記憶された筆跡情報を端末装置５０に送信するようにするとよい。ここで、端末装置５０との間の通信の方式としては、ＵＳＢ（Universal Serial Bus）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、赤外線通信機能等、種々の方式が考えられる。また、図では、通信装置５５をデジタルペン６０と別体のものとして示しているが、必ずしも別体である必要はなく、一体に構成してもよい。
【００１３】
デジタルペン６０は、電子筆記具の一例であり、印刷文書上に文字又は図形を筆記するために用いられるペンデバイスである。また、媒体に印刷された符号画像を読み取る撮像素子を備える。そして、撮像素子で読み取った符号画像から位置情報を検出し、筆記した文字又は図形をイメージデータ化した筆跡情報をこの位置情報に基づいて生成し記憶する。
【００１４】
会議サーバ７０は、複数の端末装置５０の間でネットワーク８０を介して行われる遠隔会議を管理するコンピュータ装置である。例えば、遠隔会議ごとに、参加者の識別情報、参加者が使用する端末装置５０の識別情報、資料として使用される電子文書等を管理する。そして、ある参加者の端末装置５０から遠隔会議に対する操作情報が入力された場合は、その操作情報が他の参加者の端末装置５０へ送信されるように制御する。また、本実施の形態では、遠隔会議で使用する電子文書が印刷された媒体に対する筆跡情報を管理し、参加者からの要求に応じて、電子文書に筆跡情報を重ねた表示情報を端末装置５０に送信する機能も有しており、管理装置の一例である。ここで、会議サーバ７０としては、例えば、パーソナルコンピュータやワークステーション、その他のコンピュータを用いるとよい。
ネットワーク８０は、各種情報の交換に用いる通信手段である。このネットワーク８０としては、インターネットやＬＡＮ（Local Area Network）が例示される。
【００１５】
尚、本明細書では、媒体に記録する画像の元となる電子データを「電子文書」と表記するが、これは、テキストを含む「文書」を電子化したデータのみを意味するものではない。例えば、絵、写真、図形等の画像データ（ラスタデータかベクターデータかによらない）、データベース管理ソフトウェアや表計算ソフトウェアで記録されるデータ、その他の印刷可能な電子データも含めて「電子文書」としている。
また、本明細書において、「媒体」は、画像を印刷可能な媒体であれば、その材質は問わない。代表例は紙であるが、ＯＨＰシートや金属板等であっても構わない。
更に、本明細書では、電子文書、媒体、更にはデジタルペン６０やユーザについて、それぞれを一意に識別するための識別情報を用いて処理を行うが、単に「識別情報」というときは、このうち、媒体の識別情報を意味するものとする。
【００１６】
ところで、本実施の形態では、このようなコンピュータシステムにおいて、印刷文書の出力、印刷文書への筆記、筆跡情報の表示という三段階の動作を行う。そこで、以下ではこれらを分けて説明する。
【００１７】
［印刷文書の出力］
印刷文書を出力するときには、文書サーバ２０及び識別情報サーバ３０が中心となって動作するので、これらのサーバの構成について説明する。
まず、文書サーバ２０の構成について説明する。
図２は、文書サーバ２０の機能構成例を示したブロック図である。
図示するように、文書サーバ２０は、受信部２１と、識別情報取得部２２とを備える。また、識別符号生成部２５ａと、位置符号生成部２５ｂと、符号配置部２５ｃと、パターン画像記憶部２５ｄと、符号画像生成部２５ｅとを備える。更に、文書画像生成部２６と、画像合成部２７と、送信部２９とを備える。
【００１８】
受信部２１は、端末装置１０から印刷要求を受信する。ここで、印刷要求には、印刷対象となる電子文書の識別情報（以下、「文書ＩＤ」という）と、その電子文書の印刷対象のページ番号と、印刷に関する各種設定（以下、「印刷設定」という）とが含まれる。
識別情報取得部２２は、受信部２１から文書ＩＤ、ページ番号、印刷設定を取得し、これを送信部２９に渡して識別情報の発行要求の送信を指示し、これを文書画像生成部２６に渡して文書画像の生成を指示する。また、受信部２１から識別情報を取得し、これを識別符号生成部２５ａに渡して識別符号の生成を指示する。
【００１９】
識別符号生成部２５ａは、媒体を特定する識別情報を符号化して識別符号を生成する。
位置符号生成部２５ｂは、媒体上の座標位置を示す位置情報を符号化して位置符号を生成する。
符号配置部２５ｃは、識別符号生成部２５ａにて生成された識別符号や、位置符号生成部２５ｂにて生成された位置符号等を予め定めたレイアウトに従って２次元平面に配置し２次元の符号配列を生成する。
パターン画像記憶部２５ｄは、符号配列に格納される各符号の符号値に対応するパターン画像を記憶する。
符号画像生成部２５ｅは、符号配置部２５ｃが生成した２次元の符号配列を参照し、各符号値に対応したパターン画像を選択して符号画像を生成する。
【００２０】
文書画像生成部２６は、識別情報取得部２２から文書ＩＤ、ページ番号、印刷設定を取得し、この文書ＩＤ及びページ番号で特定される電子文書のページを図示しない記憶手段から読み出し、印刷設定に従ってその電子文書の文書画像を生成する。
画像合成部２７は、符号画像生成部２５ｅが生成した符号画像と、文書画像生成部２６が生成した文書画像とを合成し、合成画像を生成する。
送信部２９は、識別情報サーバ３０に対して識別情報の発行要求を送信する。また、画像形成装置４０に対して媒体に対する画像の印刷命令を送信する。
【００２１】
次に、識別情報サーバ３０の構成について説明する。
図３は、識別情報サーバ３０の機能構成例を示したブロック図である。
図示するように、識別情報サーバ３０は、受信部３１と、媒体管理部３２と、媒体管理情報記憶部３３と、送信部３９とを備える。
【００２２】
受信部３１は、文書サーバ２０から識別情報の発行要求を受信する。また、会議サーバ７０から識別情報を指定した文書ＩＤ、ページ番号、印刷設定の検索要求を受信する。
媒体管理部３２は、識別情報の発行要求があると、識別情報を重複することなく発行し、その際に指定された文書ＩＤ、ページ番号、印刷設定を、識別情報に関連付けて記憶する。更に、識別情報が指定されると、その識別情報に対応する文書ＩＤ、ページ番号、印刷設定を取り出す。
【００２３】
媒体管理情報記憶部３３は、識別情報と、その識別情報が付与された媒体に印刷された電子文書の文書ＩＤと、その識別情報が付与された媒体に印刷された電子文書のページのページ番号と、それが付与された媒体に電子文書が印刷された際の印刷設定とを記憶するデータベースである。
送信部３９は、文書サーバ２０からの要求に応じて発行した識別情報を文書サーバ２０に送信する。
【００２４】
次いで、印刷文書を出力するときの動作について説明する。
図４は、このときの文書サーバ２０及び識別情報サーバ３０の動作を示したシーケンス図である。
文書サーバ２０では、まず、受信部２１が、電子文書の印刷要求を端末装置１０から受信する（ステップ２１１）。この電子文書の印刷要求には、文書ＩＤ、ページ番号、印刷設定が含まれる。ここで、文書ＩＤとしては、例えば、ＵＲＬ（Uniform Resource Locator）を用いるとよいが、電子文書を一意に特定することができるものであれば他の情報を用いてもよい。また、ページ番号は、電子文書のページの順番を表す数字等である。このページ番号は印刷設定に含めることもあるが、本実施の形態では、媒体に印刷される文書画像の元となる電子データを特定するものとして、印刷設定とは分けて説明する。更に、印刷設定は、部数、用紙サイズ、拡大縮小率、複数ページを１枚の媒体にまとめて出力する機能、余白等の設定を含む。
受信部２１は、これらの情報を受信すると、識別情報取得部２２に受け渡す。すると、識別情報取得部２２は、受け渡された情報を送信部２９に渡し、送信部２９が、これらの情報を識別情報サーバ３０に送信することで、識別情報の発行を要求する（ステップ２１２）。
【００２５】
これにより、識別情報サーバ３０では、受信部３１が、文書ＩＤ、ページ番号、印刷設定を受信する（ステップ３１１）。そして、文書ＩＤ、ページ番号、印刷設定は媒体管理部３２に渡され、媒体管理部３２が、媒体管理情報記憶部３３から未使用の識別情報を取り出す（ステップ３１２）。ここで、取り出す識別情報の数は、印刷設定に応じて決められる。つまり、基本的には、印刷するページ数に印刷部数を乗じて得られる数の識別情報が取り出される。但し、設定情報中に、複数ページを１枚の媒体にまとめて出力する機能の指定等がある場合は、それも考慮される。例えば、１０ページの電子文書を２ページずつ１枚の媒体にまとめて５部印刷する場合は、２５（＝１０÷２×５）個の識別情報が取り出される。
次に、媒体管理部３２は、識別情報と文書ＩＤとページ番号と印刷設定とを関連付けて媒体管理情報記憶部３３に記憶する（ステップ３１３）。そして、ステップ３１２で発行された識別情報は送信部３９に渡され、送信部３９が、文書サーバ２０に対し、識別情報を送信する（ステップ３１４）。
【００２６】
これにより、文書サーバ２０では、受信部２１が識別情報を受信する（ステップ２１３）。そして、受信部２１は、受信した識別情報を識別情報取得部２２に受け渡す。
すると、文書サーバ２０は、識別情報と位置情報とを表す符号画像を生成する（ステップ２１４）。この符号画像の生成は、具体的には、次のような処理により行われる。
即ち、まず、識別情報取得部２２が、ステップ２１３で取得した識別情報を識別符号生成部２５ａに渡し、識別符号生成部２５ａが、識別情報を符号化することで識別符号を生成する。尚、識別情報の符号化の詳細については後述する。
また、位置符号生成部２５ｂは、受信部２１から印刷設定を受け取り、印刷設定に応じた範囲の位置情報を符号化することで位置符号を生成する。尚、位置情報の符号化の詳細についても後述する。
その後、符号配置部２５ｃが、識別符号と位置符号とを予め定めたレイアウトに従って配置し、これを符号画像生成部２５ｅが、パターン画像記憶部２５ｄに記憶されたパターン画像を用いて画像化することで符号画像を生成する。
【００２７】
また、文書サーバ２０では、文書画像生成部２６が、電子文書のページの文書画像を生成する（ステップ２１５）。その際、文書画像生成部２６は、ステップ２１１で識別情報取得部２２が取得した文書ＩＤ及びページ番号を受け取り、これに基づいて対象となる電子文書のページを図示しない記憶手段から読み出す。また、ステップ２１１で識別情報取得部２２が取得した印刷設定を受け取り、これに基づいて文書画像を生成する。
そして、画像合成部２７は、ステップ２１４で生成された符号画像と、ステップ２１５で生成された文書画像とを合成し、合成画像を生成する（ステップ２１６）。
その後、合成画像は送信部２９に渡され、送信部２９が、合成画像の印刷命令を画像形成装置４０に送信する（ステップ２１７）。ここで、合成画像の印刷命令は、例えば、文書画像の印刷命令の列からなるＰＤＬ（Page Description Language）ファイルに対し、符号画像として印刷する内容をＰＤＬコマンドとして設定したＰＤＬの形式で送信される。
【００２８】
これにより、画像形成装置４０は、文書画像を例えばＣ（シアン）、Ｍ（マゼンタ）、Ｙ（イエロー）のトナーを用いて媒体に印刷する。また、符号画像を例えばＫ（カーボンを含む黒）のトナー又は特殊トナーを用いて媒体に印刷する。
ここで、特殊トナーとしては、可視光領域（４００ｎｍ〜７００ｎｍ）における最大吸収率が７％以下であり、近赤外領域（８００ｎｍ〜１０００ｎｍ）における吸収率が３０％以上の不可視トナーが例示される。ここで、「可視」及び「不可視」は、目視により認識できるかどうかとは関係しない。印刷文書における画像が可視光領域における特定の波長の吸収に起因する発色性の有無により認識できるかどうかで「可視」と「不可視」とを区別している。また、可視光領域における特定の波長の吸収に起因する発色性が若干あるが人間の目で認識し難いものも、「不可視」に含める。
【００２９】
尚、ここでは、電子文書の画像に符号画像を合成して印刷することとしたが、白紙（ノートや付箋等）に符号画像を印刷する構成としてもよい。その場合は、ステップ２１１で受信する印刷要求に文書ＩＤ及びページ番号を含めないようにし、ステップ３１３で識別情報と文書ＩＤ、ページ番号、印刷設定との関連付けを行わないようにし、ステップ２１５における文書画像の生成は実行しないようにすればよい。
【００３０】
次に、本実施の形態で生成される符号画像について説明する。
図５は、符号画像を構成する画像等の一例を示した図である。
まず、符号画像を構成する単位パターンについて説明する。
図５（ａ）は、単位パターンの一例を示したものである。
単位パターンとは、情報埋め込みの最小単位である。図では、黒塗りの領域と斜線の領域をドット配置可能な領域とし、その間にある白色の領域をドット配置不可能な領域としている。そして、ドット配置可能な領域のうち、黒塗りの領域にドットが配置され、斜線の領域にはドットが配置されていないことを示している。即ち、図は、ドットを配置可能な９箇所の中から選択した２箇所にドットを配置することで単位パターンを構成した例を示したものである。ここで、９箇所の中から２箇所を選択する組み合わせは３６（＝９Ｃ２）通りなので、単位パターンは、３６種類存在する。このうち、４種類の単位パターンは、同期パターンとして使用される。同期パターンとは、画像の回転を検出したり、識別符号及び位置符号の相対的な位置を特定したりするためのパターンである。特に、画像の回転を検出する必要があることから、４種類の同期パターンとしては、そのうちの１つの同期パターンを９０度回転するとそのうちの別の同期パターンになるようなものが選ばれる。また、この４種類の単位パターンを除く３２種類の単位パターンは、識別符号及び位置符号を表現する情報パターンとして使用され、５ビットの情報が表現される。
【００３１】
ところで、図５（ａ）に示したドットは、あくまで情報表現のためのドットであり、画像を構成する最小の点を意味するドットとは必ずしも一致しない。本実施の形態において、情報表現のためのドット（図５（ａ）の最小の四角）は、６００ｄｐｉにおける２ドット×２ドットの大きさを有している。６００ｄｐｉにおける１ドットの大きさは０．０４２３ｍｍなので、情報表現のためのドット（図５（ａ）の最小の四角）の一辺は、８４．６μｍ（＝０．０４２３ｍｍ×２）である。情報表現のためのドットは、大きくなればなるほど目に付きやすくなるため、小さいほうが好ましい。ところが、あまり小さくすると、プリンタで印刷できなくなってしまう。そこで、情報表現のためのドットの大きさとして、５０μｍより大きく１００μｍより小さい上記の値を採用している。但し、上記の値８４．６μｍは、あくまで計算上の数値であり、実際に印刷されたトナー像では１００μｍ程度になる。尚、本明細書で「ドット」というときは、特に明示しない限り、画像を構成する最小の点を意味するドットではなく、情報表現のためのドットを指すものとする。
【００３２】
次に、このような単位パターンから構成される符号ブロックについて説明する。
図５（ｂ）に、符号ブロックのレイアウトの一例を示す。尚、ここでは、画像ではなく、パターン画像によって置き換えられる直前の符号配列で示している。即ち、図５（ｂ）の最小の四角（以下、「単位ブロック」という）に、図５（ａ）のような単位パターン（３６通りの単位パターンのいずれか）が配置され、その画像が媒体に形成されることになる。
図５（ｂ）のレイアウトでは、符号ブロックの左上の１つの単位ブロックに、同期符号が配置されている。また、同期符号が配置された単位ブロックの右側の４つの単位ブロックにＸ位置符号が配置され、同期符号が配置された単位ブロックの下側の４つの単位ブロックにＹ位置符号が配置されている。更に、これらの位置符号が配置された単位ブロックに囲まれた１６（＝４×４）個の単位ブロックに識別符号が配置されている。
【００３３】
ここで、識別情報の符号化について述べる。
識別情報を符号化する場合、識別情報を構成するビット列は、ＲＳ符号化を行うために複数のブロックに分割される。符号化には、いくつかの方法があるが、本実施の形態では、ＲＳ符号化が適している。ＲＳ符号は多値の符号法であり、この場合、単位ブロックで表現される値がＲＳ符号の多値に対応するからである。例えば、１つの単位ブロックで５ビットの情報を表現する場合、６０ビットの識別情報は、ブロック長が５ビットの１２個のブロックに分割される。そして、２ブロックの誤りを訂正可能なＲＳ符号を採用したとすると、符号長は１６ブロックとなり、図５（ｂ）の符号ブロックにおける識別符号が配置される単位ブロックに収まることになる。尚、符号化方式はＲＳ符号に限定するものでなく、その他の符号化方式、例えば、ＢＣＨ符号等を使用してもよい。
【００３４】
次に、位置情報の符号化について述べる。
位置情報の符号化には、擬似乱数系列の一種であるＭ系列符号が使用される。ここで、Ｍ系列とは、ある長さのシフトレジスタとフィードバックによって生成される符号系列のうち、その周期が最長になる系列をいう。Ｋをシフトレジスタの段数とすると、Ｍ系列の系列長は２Ｋ−１となる。このＭ系列から取り出した任意の連続したＫビットは、同じＭ系列中の他の位置に現れない性質を持つ。そこで、この性質を利用して位置情報を符号化する。
ところで、本実施の形態では、符号化すべき位置情報の長さから、必要なＭ系列の次数を求め、Ｍ系列を生成している。しかしながら、符号化する位置情報の長さが予め分かっている場合は、Ｍ系列を毎回生成する必要はない。即ち、固定のＭ系列を予め生成しておき、それをメモリ等に格納しておけばよい。
例えば、系列長８１９１のＭ系列（Ｋ＝１３）を使用したとする。この場合、位置符号も５ビット単位で埋め込むため、系列長８１９１のＭ系列から５ビットずつ取り出してブロック化する。
【００３５】
尚、本明細書では、説明を簡単にするために、識別情報と位置情報とは明確に区別して用いている。しかしながら、広範な位置情報を用意しておき、媒体ごとに異なる範囲から位置情報を切り出して埋め込み、位置情報の違いによって媒体を識別するという手法もある。そこで、このような手法においては、媒体を識別する機能が位置情報に備わっているものと見て、位置情報を識別情報としても考えるものとする。
【００３６】
ここで、ステップ３１３で記憶される媒体管理情報の具体的な内容について説明する。
図６は、媒体管理情報の具体例を示した図である。
図示するように、媒体管理情報は、識別情報と、文書ＩＤと、ページ番号と、印刷設定とを対応付けたものとなっている。
このうち、識別情報は、既に述べた通り、媒体を一意に識別するための情報である。
また、文書ＩＤは、既に述べた通り、電子文書を一意に識別するための情報である。
更に、ページ番号は、既に述べた通り、電子文書のページを示す例えば数字である。
更にまた、印刷設定は、既に述べた通り、端末装置１０で電子文書の印刷が要求された際に設定された用紙サイズ、拡大縮小率等の情報である。
【００３７】
図には、文書ＩＤ「ＤｏｃＡ」の電子文書の１ページ目を、識別情報「０００００１」、「０００００２」、「０００００３」、「０００００４」、「０００００５」のＡ４サイズの媒体に拡縮率１００％で印刷したことが示されている。つまり、例えば、電子文書の１ページ目を印刷した紙の資料を５人の参加者に１枚ずつ配布して会議を行う場合に記憶される媒体管理情報を示したものである。
【００３８】
［印刷文書への筆記］
このようにして出力された印刷文書（例えば、紙の資料）を持参して行われる会議では、参加者が印刷文書にメモを記入することがある。本実施の形態では、この印刷文書への筆記をデジタルペン６０で行い、筆記の内容を電子化した筆跡情報は会議サーバ７０に記憶される。即ち、印刷文書への筆記を行うときには、デジタルペン６０及び会議サーバ７０が中心となって動作するので、これらの構成について説明する。
【００３９】
まず、デジタルペン６０の構成について説明する。
図７は、デジタルペン６０の構成例を示した図である。
図示するように、デジタルペン６０は、ペン全体の動作を制御する制御回路６１を備える。また、制御回路６１は、読み取った符号画像を処理する画像処理部６１ａと、そこでの処理結果から識別情報及び位置情報を抽出するデータ処理部６１ｂとを含む。
また、制御回路６１には、デジタルペン６０による筆記動作をペンチップ６９に加わる圧力によって検出する圧力センサ６２が接続されている。更に、媒体上に赤外光を照射する赤外ＬＥＤ６３と、反射光を検知することによって符号画像を読み取る赤外ＣＭＯＳ６４も接続されている。更にまた、識別情報及び位置情報を記憶するための情報メモリ６５と、外部装置と通信するための通信回路６６と、ペンを駆動するためのバッテリ６７と、ペンの識別情報（ペンＩＤ）を記憶するペンＩＤメモリ６８も接続されている。
【００４０】
次に、このうち制御回路６１において実現される機能構成について更に詳細に説明する。
図８は、制御回路６１の機能構成例を示したブロック図である。尚、図では、制御回路６１内の画像処理部６１ａとデータ処理部６１ｂとに分けて、機能構成例を示している。
図示するように、画像処理部６１ａは、画像取得部６１１と、ドット配列生成部６１２とを備える。また、データ処理部６１ｂは、符号配列生成部６１３と、識別情報取得部６１４と、位置情報取得部６１５と、筆跡情報生成部６１６とを備える。そして、更に、ペンＩＤ取得部６１７と、通信制御部６１９とを備える。
【００４１】
画像取得部６１１は、赤外ＣＭＯＳ６４が印刷文書から読み取った符号画像を取得する。また、必要に応じて、符号画像に含まれるノイズを除去する。
ドット配列生成部６１２は、符号画像におけるドットの位置を参照して、ドット配列を生成する。即ち、２次元の配列上で、例えば、ドットがある位置に「１」を、ドットがない位置に「０」を記憶することにより、画像として検出したドットをデジタルデータに置き換える。そして、この２次元の配列をドット配列として出力する。
【００４２】
符号配列生成部６１３は、ドット配列上で、符号ブロック内の単位パターンに対応するブロックを検出する。具体的には、単位パターンが配置されるブロックと同じ形状及び大きさの枠をドット配列上で動かし、枠内のドット数が均等になる位置で枠を固定する。例えば、図５（ａ）の単位パターンを用いる場合であれば、３ドット×３ドットに対応する大きさの枠を動かし、枠内に含まれるドット数が２となる位置で枠を固定する。そして、その枠で区切られた各ブロック内のドット位置から定まる符号値を格納した符号配列を生成する。また、この符号配列が生成されると、予め定められた同期符号の符号値を検索することによって、同期符号の位置が特定される。
【００４３】
識別情報取得部６１４は、符号配列から同期符号の位置を基準にして識別符号を検出する。そして、画像生成時にＲＳ符号化処理で用いたパラメータを用いて識別符号を復号し、識別情報を取得する。
位置情報取得部６１５は、符号配列から同期符号の位置を基準にして位置符号を検出する。そして、位置符号からＭ系列の部分系列を取り出し、画像生成時に使用したＭ系列におけるこの部分系列の位置を参照し、この位置を同期符号によるオフセットで補正した値を位置情報として取得する。尚、オフセットで補正するのは、位置符号の間に同期符号が配置されているためである。
【００４４】
筆跡情報生成部６１６は、位置情報取得部６１５が取得した位置情報を連結して筆跡情報を生成する。ここで、筆跡情報には、少なくともデジタルペン６０のペン先の軌跡を電子化したデータが含まれるが、これ以外の情報を含んでもよい。ペン先の軌跡以外の情報としては、例えば、筆記した時にペンに設定されていた色の情報や、筆圧の情報等がある。
ペンＩＤ取得部６１７は、デジタルペン６０の識別情報であるペンＩＤをペンＩＤメモリ６８（図７参照）から取得する。
通信制御部６１９は、識別情報取得部６１４が取得した識別情報と、筆跡情報生成部６１６が生成した筆跡情報と、ペンＩＤ取得部６１７が取得したペンＩＤとを通信回路６６に受け渡すことで、通信装置５５への情報送信を実現する。また、会議サーバ７０からの筆跡情報登録完了報告を受信した通信回路６６から、この登録完了報告を受け取る。
【００４５】
次に、会議サーバ７０の構成について説明する。
図９は、会議サーバ７０の機能構成例を示したブロック図である。尚、会議サーバ７０は、後述する筆跡情報の表示を行うときにも中心となって動作するので、図には、筆跡情報の表示のための構成も示している。
図示するように、会議サーバ７０は、受信部７１と、筆跡管理部７２と、筆跡管理情報記憶部７３と、電子文書記憶部７４と、ユーザ情報記憶部７５と、定義情報記憶部７６と、表示情報生成部７７と、送信部７９とを備える。
【００４６】
受信部７１は、印刷文書に対する筆記がなされた際には、識別情報、筆跡情報、ペンＩＤを端末装置５０から受信する。また、筆跡情報の表示が指示された際には、筆跡情報を重ねて表示する対象となる電子文書の文書ＩＤ及びページ番号や、複数のユーザの筆跡情報から表示対象の筆跡情報を抽出する際の筆記の属性に関する抽出条件を端末装置５０から受信する。ここで、筆記の属性としては、後述するように、筆記がなされた位置、筆記を行ったユーザ、筆記がなされた時刻等が例示される。
【００４７】
筆跡管理部７２は、受信部７１が受信した識別情報、筆跡情報、ペンＩＤを取得し、筆跡管理情報記憶部７３に登録する。このとき、筆跡情報は、ストロークを単位としたストローク情報として登録される。ここで、ストロークとは、ペン先を媒体に接触させた状態でなされた一連の筆記のことである。また、筆跡情報には、筆跡における各点が指示された時刻の情報も含まれているので、ストロークが開始された時刻の情報も、筆記時刻として登録する。また、筆跡管理部７２は、筆跡情報の表示が指示された際には、指定された電子文書のページに対する筆跡情報のうち、指定された抽出条件を満たす筆跡情報を、筆跡管理情報記憶部７３から取り出す。本実施の形態では、属性情報を抽出する抽出手段の一例として、また、筆記情報を取得する取得手段の一例として、筆跡管理部７２を設けている。
筆跡管理情報記憶部７３は、筆跡管理部７２によって管理される筆跡管理情報を記憶する。本実施の形態では、属性情報を記憶する記憶手段の一例として、筆跡管理情報記憶部７３を設けている。
【００４８】
電子文書記憶部７４は、文書サーバ２０から受信した電子文書のページを一時的に記憶する。
ユーザ情報記憶部７５は、表示情報生成部７７が表示情報を生成する際に参照するユーザに関する情報（ユーザ情報）を一時的に記憶する。
定義情報記憶部７６は、表示情報生成部７７が表示情報を生成する際に参照する各種定義情報を記憶する。
【００４９】
表示情報生成部７７は、筆跡情報の表示が指示された際に、文書サーバ２０から取得した電子文書のページに、複数のユーザの筆跡情報のうちの抽出された筆跡情報を重畳して表示するための表示情報を生成する。この表示情報としては、例えば、端末装置５０で表示するイメージを生成する元となるデータを生成する。本実施の形態では、表示情報を生成する生成手段の一例として、表示情報生成部７７を設けている。
送信部７９は、筆跡情報の表示が指示された際には、端末装置５０に対して、表示情報生成部７７が生成した表示情報を送信する。また、遠隔会議に接続している他の端末装置５０に情報を送信する。本実施の形態では、筆記情報を送信する送信手段の一例として、送信部７９を設けている。
【００５０】
次に、デジタルペン６０が筆跡情報を生成して会議サーバ７０に登録する際の動作について説明する。
デジタルペン６０では、まず、赤外ＬＥＤ６３が媒体に対して赤外光を照射し、赤外ＣＭＯＳ６４がその反射光を受光することにより、符号画像を読み取る。そして、画像取得部６１１がこの読み取った符号画像を取得する。そして、符号画像にノイズが含まれていれば、これを除去する。次に、ドット配列生成部６１２が、符号画像に含まれるドット位置をデジタルデータ化し、ドット配列を生成する。
【００５１】
図１０は、その後のデジタルペン６０及び会議サーバ７０の動作を示したシーケンス図である。
デジタルペン６０は、識別情報と、筆跡情報と、ペンＩＤとを取得する(ステップ６２１)。具体的には、次のような処理を行う。即ち、まず、符号配列生成部６１３が、ドット配列からブロックを検出し、ブロックごとの符号値を格納した符号配列を生成する。そして、符号配列において、同期符号の位置を特定する。その後、識別情報取得部６１４が、同期符号の位置に基づいて識別符号を検出し、これを復号して識別情報を取得する。また、位置情報取得部６１５が、同期符号の位置に基づいて位置符号を検出し、これを復号して位置情報を取得する。そして、筆跡情報生成部６１６が、位置情報を連結して筆跡情報を生成する。更に、本実施の形態では、ペンＩＤ取得部６１７が、ペンＩＤメモリ６８（図７参照）からペンＩＤを取得する。
【００５２】
そして、通信制御部６１９がこれらの情報を通信回路６６に受け渡し、通信回路６６がこれらの情報を通信装置５５及び端末装置５０を介して会議サーバ７０へ送信する(ステップ６２２)。
【００５３】
これにより、会議サーバ７０では、まず、受信部７１が、識別情報、筆跡情報、ペンＩＤを受信し、筆跡管理部７２に渡す（ステップ７２１）。そして、これらの情報のうち、識別情報は送信部７９に渡され、送信部７９が識別情報サーバ３０に識別情報を送信する。これにより、識別情報サーバ３０は、識別情報に対応する文書ＩＤ、ページ番号、印刷設定を返すので、受信部７１がこれらの情報を受信し、筆跡管理部７２に渡す。
次に、筆跡管理部７２は、筆記の対象である電子文書のページが電子文書記憶部７４に記憶されているかどうかを判定する（ステップ７２２）。例えば、会議サーバ７０において、この電子文書を用いた遠隔会議が行われていれば、電子文書記憶部７４に電子文書のページが記憶されているが、この電子文書を用いた遠隔会議が終了していれば、電子文書記憶部７４から電子文書のページが削除されている可能性があるので、このような判断を行っている。
【００５４】
ここで、電子文書のページが電子文書記憶部７４に記憶されていると判定されれば、そのまま処理はステップ７２４へ進むが、電子文書のページが電子文書記憶部７４に記憶されていないと判定されれば、筆跡管理部７２は、文書サーバ２０から電子文書のページを取得して電子文書記憶部７４に保存する（ステップ７２３）。具体的には、筆跡管理部７２は、文書ＩＤ及びページ番号を送信部７９に渡し、送信部７９が文書サーバ２０に文書ＩＤ及びページ番号を送信する。これにより、文書サーバ２０は、電子文書のページを返すので、受信部７１がこれを受信し、筆跡管理部７２に渡す。そして、筆跡管理部７２が、渡された電子文書のページを電子文書記憶部７４に記憶する。
【００５５】
次いで、筆跡管理部７２は、ステップ７２１で受信したペンＩＤを含むユーザ情報がユーザ情報記憶部７５に記憶されているかどうかを判定する（ステップ７２４）。ユーザ情報については、後で詳しく述べるが、例えば、ユーザに固有の属性情報であって会議に関係しないもの、ユーザに固有の属性情報であって会議に関係するもの、会議において収集されたユーザに関する情報等が含まれる。
【００５６】
ここで、ユーザ情報がユーザ情報記憶部７５に記憶されていると判定されれば、そのまま処理はステップ７２６へ進むが、ユーザ情報がユーザ情報記憶部７５に記憶されていないと判定されれば、筆跡管理部７２は、ユーザ情報を作成してユーザ情報記憶部７５に保存する（ステップ７２５）。具体的には、筆跡管理部７２は、会議に関係しないユーザ情報は、図示しないユーザ管理サーバにペンＩＤを用いて問い合わせることにより取得する。また、会議に関係するユーザ情報は、会議サーバ７０で管理される情報に基づいて作成する。
【００５７】
引き続き、筆跡管理部７２は、ステップ７２１で渡された筆跡情報を、筆記時刻、ペンＩＤ、識別情報に関連付けて、ストローク情報として、筆跡管理情報記憶部７３に記憶する（ステップ７２６）。
また、筆跡管理部７２は、遠隔会議が行われているかどうかを判定する（ステップ７２７）。
ここで、遠隔会議が行われていなければ、そのままステップ７２９へ進むが、遠隔会議が行われていれば、電子文書のページ上の筆跡情報を、複数のユーザ間で共有できるように他の端末装置５０に送信する（ステップ７２８）。即ち、筆跡情報を送信部７９に渡し、送信部７９が筆跡情報を他の端末装置５０に送信する。
その後、筆跡情報登録完了報告が筆跡管理部７２から送信部７９へ渡され、送信部７９が、筆跡情報登録完了報告を端末装置５０及び通信装置５５を介してデジタルペン６０に送信する（ステップ７２９）。
【００５８】
これにより、デジタルペン６０では、通信回路６６が筆跡情報登録完了報告を受信し、通信制御部６１９が通信回路６６からこれを受け取る（ステップ６２３）。
【００５９】
ここで、ステップ７２５で作成されるユーザ情報の具体的な内容について説明する。
図１１は、ユーザ情報の具体例を示した図である。
図示するように、ユーザ情報は、ペンＩＤと、ユーザＩＤと、役割情報と、発言情報とを対応付けたものとなっている。
このうち、ペンＩＤは、既に述べた通り、デジタルペン６０を一意に識別するための情報である。
また、ユーザＩＤは、ユーザを一意に識別するための情報である。
更に、役割情報は、各ユーザの役割を示す情報である。尚、役割としては、会議における役割（主催者、単なる参加者等）が代表例として考えられるが、会社のような組織における役割（役職）等であってもよい。
更にまた、発言情報は、会議における各ユーザの発言に関する情報である。ここでは、一例として、各ユーザが発言した時刻を示している。
【００６０】
図には、ペンＩＤ「Ｐ００１」のデジタルペン６０をユーザＩＤ「Ｕ００１」のユーザが所持し、このユーザの役割は「Ｌ１」で、このユーザは会議において時刻「Ｔ１」、「Ｔ３」、「Ｔ９」、「Ｔ１３」に発言したことが示されている。また、ペンＩＤ「Ｐ００２」、「Ｐ００３」、「Ｐ００４」、「Ｐ００５」のデジタルペン６０を、ユーザＩＤ「Ｕ００２」、「Ｕ００３」、「Ｕ００４」、「Ｕ００５」のユーザが、それぞれ所持し、これらのユーザの役割は「Ｌ２」で、各ユーザが図示するような時刻に発言したことも示されている。
【００６１】
また、ステップ７２６で記憶される筆跡管理情報の具体的な内容について説明する。
図１２は、筆跡管理情報の具体例を示した図である。
図示するように、筆跡管理情報は、筆記時刻と、ペンＩＤと、識別情報と、ストローク情報とを対応付けたものとなっている。
このうち、筆記時刻は、既に述べた通り、筆跡情報における各ストロークの開始時刻である。
また、ペンＩＤは、既に述べた通り、デジタルペン６０を一意に識別するための情報である。
更に、識別情報は、既に述べた通り、媒体を一意に識別するための情報である。
更にまた、ストローク情報は、既に述べた通り、媒体に対する筆記内容を電子化した情報であり、１つのストロークに対応する情報である。尚、ここでは、ストロークをイメージデータとしてではなく、媒体上のペン先が位置した座標の集合として記憶しているが、ストローク情報をイメージデータとして記憶し、その開始点の座標のみを記憶するものでもよい。
【００６２】
図には、例えば、１０時００分００秒から、ペンＩＤ「Ｐ００１」のデジタルペン６０を用いてなされた、識別情報「０００００１」の媒体に対するストローク情報が、媒体上の点の集合｛（Ｘ１１，Ｙ１１），（Ｘ１２，Ｙ１２），（Ｘ１３，Ｙ１３），・・・｝として表されることが示されている。
【００６３】
［筆跡情報の表示］
会議の場面で、このように記憶された複数の参加者の筆跡情報を端末装置５０のディスプレイに合成して表示したい場合がある。しかしながら、会議への参加者が増え、筆跡情報が多くなってくると、情報が氾濫し、どれが重要な筆跡情報であるのか分からなくなってしまう。従って、全ての筆跡情報をディスプレイに表示したのでは、会議の議論への効果的なフィードバックは期待できない。
そこで、本実施の形態では、複数の参加者の筆跡情報のうち重要な情報を選択表示することによって効率よく情報を共有し、会議中に筆跡情報を活用して議論を活発に進められるようにする。
また、会議中だけでなく、会議後においても、このような重要な情報の選択表示による効率的な情報共有を行うようにする。
【００６４】
このような筆跡情報の表示を行うときには、端末装置５０及び会議サーバ７０が中心となって動作する。但し、会議サーバ７０は、印刷文書への筆記についての説明で述べたので、ここでは、端末装置５０の構成についてのみ説明する。
【００６５】
図１３は、端末装置５０の構成例を示したブロック図である。
図示するように、端末装置５０は、受信部５１と、表示制御部５２と、操作受付部５３と、送信部５９とを備える。
【００６６】
受信部５１は、筆跡情報の表示が指示された際には、電子文書に筆跡情報を重畳して表示するための表示情報を会議サーバ７０から受信する。本実施の形態では、筆記情報を受信する受信手段の一例として、受信部５１を設けている。
表示制御部５２は、受信部５１が受信した表示情報に基づくディスプレイでの表示を制御する。本実施の形態では、筆記画像を出力する出力手段の一例として、表示制御部５２を設けている。
操作受付部５３は、遠隔会議に関するユーザ操作や、筆跡情報の表示を要求するユーザ操作を受け付ける。
送信部５９は、操作受付部５３が受け付けたユーザ操作の内容を示す操作情報を会議サーバ７０に送信する。
【００６７】
次に、端末装置５０からの要求に応じて会議サーバ７０が端末装置５０に筆跡情報を表示する際の動作について説明する。
図１４は、このときの端末装置５０及び会議サーバ７０の動作を示したシーケンス図である。
まず、端末装置５０においてユーザ操作が行われると、端末装置５０では、操作受付部５３が、このユーザ操作を受け付ける（ステップ５３１）。そして、ユーザ操作の内容を示す操作情報が送信部５９に渡され、送信部５９が、操作情報を会議サーバ７０に送信する（ステップ５３２）。ここで、操作情報には、遠隔会議中に行われる通常の操作であるページめくり等の情報や、筆跡情報の表示を要求する情報がある。また、操作情報が筆跡情報の表示を要求する情報である場合には、筆跡情報を抽出する際に用いられる抽出条件が付加される。
【００６８】
これにより、会議サーバ７０では、まず、受信部７１が、端末装置５０から操作情報を受信し、表示情報生成部７７に渡す（ステップ７３１）。
次に、表示情報生成部７７は、渡された操作情報が筆跡情報の表示を要求するものかどうかを判定する（ステップ７３２）。
【００６９】
その結果、操作情報が筆跡情報の表示を要求するものでなかった場合、即ち、ページめくりの操作のように、遠隔会議における通常の操作であった場合、表示情報生成部７７は、遠隔会議が行われているかどうかを判定する（ステップ７３３）。そして、遠隔会議が行われていれば、複数の端末装置５０で共有されている電子文書の表示情報に対して操作情報に基づく変更を加え、変更後の表示情報を、複数のユーザ間で共有できるように他の端末装置５０に送信し（ステップ７３４）、処理を終了する。また、遠隔会議が行われていなければ、そのまま処理を終了する。
【００７０】
一方、操作情報が筆跡情報の表示を要求するものであった場合、表示情報生成部７７は、表示対象である電子文書のページが電子文書記憶部７４に記憶されているかどうかを判定する（ステップ７３５）。例えば、会議サーバ７０において、この電子文書を用いた遠隔会議が行われていれば、電子文書記憶部７４に電子文書のページが記憶されているが、この電子文書を用いた遠隔会議が終了していれば、電子文書記憶部７４から電子文書のページが削除されている可能性があるので、このような判断を行っている。
【００７１】
ここで、電子文書のページが電子文書記憶部７４に記憶されていると判定されれば、そのまま処理はステップ７３７へ進むが、電子文書のページが電子文書記憶部７４に記憶されていないと判定されれば、表示情報生成部７７は、文書サーバ２０から電子文書のページを取得して電子文書記憶部７４に保存する（ステップ７３６）。具体的には、表示情報生成部７７は、ステップ７３１で取得した文書ＩＤ及びページ番号を送信部７９に渡し、送信部７９が文書サーバ２０に文書ＩＤ及びページ番号を送信する。これにより、文書サーバ２０は、電子文書のページを返すので、受信部７１がこれを受信し、表示情報生成部７７に渡す。そして、表示情報生成部７７が、渡された電子文書のページを電子文書記憶部７４に記憶する。
【００７２】
その後、表示情報生成部７７は、筆跡管理情報記憶部７３で管理される筆跡情報の中から抽出された筆跡情報を合成する筆跡情報合成処理を行う（ステップ７３７）。
そして、この筆跡情報合成処理による合成結果は送信部７９に渡され、送信部７９が、合成結果を端末装置５０に送信する（ステップ７３８）。
【００７３】
これにより、端末装置５０は、合成結果を受信し（ステップ５３３）、ディスプレイに表示する（ステップ５３４）。
【００７４】
ここで、ステップ７３７における筆跡情報合成処理について詳細に説明する。
上述したように、ステップ７３１で受信した操作情報が筆跡情報の表示を要求する場合、操作情報には筆跡情報の抽出条件が付加されるが、この筆跡情報合成処理としては、この抽出条件に対応して３つの処理が考えられる。そこで、この３つの処理を第１〜第３の筆跡情報合成処理として順に説明する。
【００７５】
図１５は、第１の筆跡情報合成処理の動作例を示したフローチャートである。この第１の筆跡情報合成処理は、「多く書き込まれている領域における筆跡情報を抽出する」という抽出条件が指定された場合の処理である。つまり、重要な筆記の属性情報が満たすべき条件として予め定められた条件の一例として、多くの筆記が書き込まれた領域に書き込まれているという条件を採用した場合の処理である。
この場合、表示情報生成部７７は、まず、定義情報記憶部７６に記憶された領域定義を読み出す（ステップ７４１）。ここで、領域定義とは、筆跡情報が多く書き込まれているかどうかを判定するための領域に関する定義情報である。例えば、１ページを４分割する場合は、左上、左下、右上、右下という領域定義が考えられるが、１ページの分割数は一般的にＮ（自然数）としてよく、１ページの分割方法として如何なるものを採用してもよい。尚、領域定義は、ユーザが自由に設定可能なものであってよい。そして、読み出された領域定義は筆跡管理部７２に渡される。
【００７６】
すると、筆跡管理部７２は、筆跡管理情報記憶部７３に記憶された筆跡管理情報の１レコードを読み出す（ステップ７４２）。
そして、そのレコードにおける筆跡情報を、その筆跡情報を含む領域（１つとは限らない）に関連付ける（ステップ７４３）。具体的には、筆跡情報を構成する何れかの点が、領域定義で定義された何れかの領域の範囲内にあれば、筆跡情報をこの領域に関連付ける。例えば、ページの左上の領域について、左端のＸ座標を０、右端のＸ座標をＸＣ、上端のＹ座標を０、下端のＹ座標をＹＣとすると、図１２の１行目の筆跡情報は、（Ｘ１１，Ｙ１１）、（Ｘ１２，Ｙ１２）、（Ｘ１３，Ｙ１３）、…の中に、Ｘ座標が０以上でＸＣ以下、かつ、Ｙ座標が０以上でＹＣ以下の点があれば、ページの左上の領域に関連付けられる。
また、筆跡管理部７２は、筆跡情報が関連付けられた領域に対して筆跡情報の個数をカウントするために設けられた筆跡カウンタをカウントアップする（ステップ７４４）。
【００７７】
その後、筆跡管理部７２は、筆跡管理情報記憶部７３に記憶された筆跡管理情報に未処理のレコードが存在するかどうかを判定し（ステップ７４５）、存在すれば、ステップ７４２〜７４４の処理を繰り返し、存在しなければ、表示情報生成部７７に制御を戻す。尚、このとき、筆跡管理部７２から表示情報生成部７７へは、筆跡カウンタの情報と、筆跡情報と領域との関連付けの情報とが伝えられる。
これにより、表示情報生成部７７は、筆跡カウンタにおけるカウント値が最も大きい領域を選択する（ステップ７４６）。
そして、選択した領域に関連付けられた筆跡情報を電子文書のページに重畳する（ステップ７４７）。
【００７８】
尚、この動作例では、筆跡情報の一部でも書き込まれている領域に対して、その筆跡情報を関連付けるようにした。これにより、「多く書き込まれている領域」とは、その領域と他の領域に跨る筆跡情報も含めて、筆跡情報が多く書き込まれている領域を意味することになる。しかしながら、筆跡情報（１つのストローク）の全体がある領域内に存在する場合に、その筆跡情報をその領域に関連付けるようにしてもよい。
【００７９】
図１６は、第２の筆跡情報合成処理の動作例を示したフローチャートである。この第２の筆跡情報合成処理は、「ユーザ情報に基づいて筆跡情報を抽出する」という抽出条件が指定された場合の処理である。尚、この抽出条件の指定においては、ユーザ情報としてユーザの役割を用いるか会議におけるユーザの発言数を用いるかが併せて指定されるものとする。つまり、重要な筆記の属性情報が満たすべき条件として予め定められた条件の一例として、ユーザが指定された役割を有するという条件、又は、会議におけるユーザの発言回数が基準を超えているという条件を採用した場合の処理である。
この場合、表示情報生成部７７は、まず、ユーザ情報記憶部７５に記憶されたユーザ情報を読み出す（ステップ７５１）。
そして、表示情報生成部７７は、ユーザ情報としてユーザの役割を用いる旨の指定があったか、ユーザ情報として会議におけるユーザの発言数を用いる旨の指定があったかを判定する（ステップ７５２）。
【００８０】
その結果、ユーザ情報としてユーザの役割を用いる旨の指定があったと判定された場合、表示情報生成部７７は、ステップ７５１で読み出したユーザ情報を参照し、指定された役割情報に対応するペンＩＤを特定する（ステップ７５３）。例えば、ユーザ情報が図１１に示したものの場合、ユーザの役割情報として「Ｌ１」が指定されたとすると、ペンＩＤ「Ｐ００１」が特定される。そして、特定されたペンＩＤは筆跡管理部７２に渡される。
【００８１】
一方、ユーザ情報として会議におけるユーザの発言数を用いる旨の指定があったと判定された場合、表示情報生成部７７は、ステップ７５１で読み出したユーザ情報を参照し、全発言数をカウントする（ステップ７５４）。そして、筆跡情報を抽出するかどうかの基準となる基準発言数を算出する（ステップ７５５）。ここで、基準発言数は、如何なる方法によって算出してもよいが、例えば、全発言数に予め定めた割合Ｒを乗ずることによって算出することが考えられる。その後、基準発言数以上の発言をしたことを示す発言情報に対応するペンＩＤを特定する（ステップ７５６）。例えば、ユーザ情報が図１１に示したものの場合、割合Ｒが０．２であるとすると、全発言数が１５、基準発言数が３となるので、３回以上発言をしているユーザのデジタルペン６０のペンＩＤ「Ｐ００１」、「Ｐ００２」、「Ｐ００３」が特定される。そして、特定されたペンＩＤは筆跡管理部７２に渡される。
【００８２】
すると、筆跡管理部７２は、筆跡管理情報記憶部７３に記憶された筆跡管理情報の中から、渡されたペンＩＤを含むレコードを読み出し、表示情報生成部７７に制御を戻す（ステップ７５７）。尚、このとき、筆跡管理部７２から表示情報生成部７７へは、読み出したレコードが渡される。
これにより、表示情報生成部７７は、渡されたレコードにおける筆跡情報を電子文書のページに重畳する（ステップ７５８）。
【００８３】
尚、この動作例では、ユーザの役割と、会議におけるユーザの発言回数とを別々に考慮したが、両方を同時に考慮して筆跡情報を抽出してもよい。その場合、ユーザの役割と、会議におけるユーザの発言回数とを、どの程度の割合で考慮するかに応じて、これらに重み付けを行ってもよい。
【００８４】
図１７は、第３の筆跡情報合成処理の動作例を示したフローチャートである。この第３の筆跡情報合成処理は、「多く書き込まれている時間範囲（時間帯）における筆跡情報を抽出する」という抽出条件が指定された場合の処理である。つまり、重要な筆記の属性情報が満たすべき条件として予め定められた条件の一例として、多くの筆記が書き込まれた時間範囲に書き込まれているという条件を採用した場合の処理である。
この場合、表示情報生成部７７は、まず、定義情報記憶部７６に記憶された時間範囲定義を読み出す（ステップ７６１）。ここで、時間範囲定義とは、筆跡情報が多く書き込まれているかどうかを判定するための時間範囲に関する定義情報である。例えば、１０時０分０秒から１０時０分５９秒まで、１０時０分０秒から１０時２分５９秒までといった時間の範囲が定義される。或いは、時間範囲定義として１分、３分といった時間の長さのみを定義しておき、これと会議開始時刻（例えば、１０時０分０秒）とに基づいて、上記時間の範囲を自動算出し定義してもよい。尚、時間範囲定義は、ユーザが自由に設定可能なものであってよい。そして、読み出された時間範囲定義は筆跡管理部７２に渡される。
【００８５】
すると、筆跡管理部７２は、筆跡管理情報記憶部７３に記憶された筆跡管理情報の１レコードを読み出す（ステップ７６２）。
そして、そのレコードにおける筆跡情報を、その筆跡情報を含む時間範囲に関連付ける（ステップ７６３）。具体的には、筆跡情報に対応する筆記時刻が、時間範囲定義で定義された何れかの時間範囲の範囲内にあれば、筆跡情報をこの時間範囲に関連付ける。例えば、１０時０分０秒から１０時０分５９秒まで、１０時１分０秒から１０時１分５９秒まで、１０時２分０秒から１０時２分５９秒まで等の時間範囲が定義されていたとすると、図１２の３行目から８行目の筆跡情報は、その筆記時刻が１０時５分０秒から１０時５分５９秒までの時間範囲に含まれるので、この時間範囲に関連付けられる。
また、筆跡管理部７２は、筆跡情報が関連付けられた時間範囲に対して筆跡情報の個数をカウントするために設けられた筆跡カウンタをカウントアップする（ステップ７６４）。
【００８６】
その後、筆跡管理部７２は、筆跡管理情報記憶部７３に記憶された筆跡管理情報に未処理のレコードが存在するかどうかを判定し（ステップ７６５）、存在すれば、ステップ７６２〜７６４の処理を繰り返し、存在しなければ、表示情報生成部７７に制御を戻す。尚、このとき、筆跡管理部７２から表示情報生成部７７へは、筆跡カウンタの情報と、筆跡情報と時間範囲との関連付けの情報とが伝えられる。
これにより、表示情報生成部７７は、筆跡カウンタにおけるカウント値が最も大きい時間範囲を選択する（ステップ７６６）。
そして、選択した時間範囲に関連付けられた筆跡情報を電子文書のページに重畳する（ステップ７６７）。
【００８７】
尚、ここでは、図１４のステップ７３７における筆跡情報合成処理として、上記の３つの処理を挙げたが、これに限定されるものではない。例えば、ユーザが指定した領域に書かれた筆跡情報、ユーザが指定した筆記者によって書かれた筆跡情報、ユーザが指定したデジタルペン６０で書かれた筆跡情報、ユーザが指定した時間帯に書かれた筆跡情報を抽出するようなものであってもよい。或いは、筆記の属性として筆圧の情報を記録しておき、基準を超えた筆圧で書かれた筆跡情報を抽出するようなものでもよい。
【００８８】
ここで、端末装置５０における筆跡情報と電子文書の表示例について示す。
図１８は、第１の表示例について示した図である。
この第１の表示例では、電子文書が印刷された複数の印刷文書のそれぞれに複数のユーザが筆記した内容を、電子文書を表す１つのオブジェクトに重畳して表示している。
即ち、（ａ−１）に示すように、印刷文書４１に筆跡情報４１１が書き込まれ、（ａ−２）に示すように、印刷文書４２に筆跡情報４２１が書き込まれ、（ａ−３）に示すように、印刷文書４３に筆跡情報４３１が書き込まれたとすると、（ｂ）に示すように、印刷文書４１〜４３と同じイメージを持つ表示画像４４に対して、筆記画像４４１〜４４３が重ね合わせて表示される。ここで、図には示していないが、（ａ−１）〜（ａ−３）の印刷文書４１〜４３は、Ｎ人のユーザのうちの３人に配布された印刷文書で、この３人のユーザがそれぞれの印刷文書に筆跡情報４１１，４２１，４３１を書き込み、これらの筆跡情報が、上記の動作で抽出条件を満たすと判定されたものとする。尚、筆跡情報は、その筆跡情報を識別する情報（ユーザＩＤ、ペンＩＤ等）ごとに異なる色で表示してもよい。
【００８９】
また、図１９は、第２の表示例について示した図である。
この第２の表示例では、電子文書が印刷された複数の印刷文書のそれぞれに複数のユーザが筆記した内容を、印刷文書を並べて構成されたオブジェクトに重畳して表示している。
即ち、（ａ−１）に示すように、印刷文書４１に筆跡情報４１１が書き込まれ、（ａ−２）に示すように、印刷文書４２に筆跡情報４２１が書き込まれ、（ａ−３）に示すように、印刷文書４３に筆跡情報４３１が書き込まれたとすると、（ｂ）に示すように、印刷文書４１〜４３を合わせたイメージを持つ表示画像４５に対して、筆記画像４５１〜４５３が重ね合わせて表示される。ここでも、図１８と同様、（ａ−１）〜（ａ−３）の印刷文書４１〜４３は、Ｎ人のユーザのうちの３人に配布された印刷文書で、この３人のユーザがそれぞれの印刷文書に筆跡情報４１１，４２１，４３１を書き込み、これらの筆跡情報が、上記の動作で抽出条件を満たすと判定されたものとする。尚、筆跡情報は、その筆跡情報を識別する情報（ユーザＩＤ、ペンＩＤ等）ごとに異なる色で表示してもよい。
以上により、本実施の形態の動作の説明を終了する。
【００９０】
尚、本実施の形態において、印刷文書は、Ａ４、１００％という標準的設定で印刷されていたので、筆跡情報の表示を要求する際に、ユーザは、文書ＩＤとページ番号のみを指定するようにした。しかしながら、実際には、複雑な印刷設定を指定して印刷文書を出力することも考えられる。このような場合は、文書ＩＤ、ページ番号、印刷設定の組み合わせを、会議を一意に識別する会議ＩＤと対応付けて記憶しておき、会議ＩＤを指定することで、これに対応する文書ＩＤ、ページ番号、印刷設定の組み合わせを用いて、筆跡情報を重畳する対象のオブジェクトを生成するようにしてもよい。
また、本実施の形態では、複数のユーザが書き込んだ筆跡情報を合成して表示する場面として、会議の場面を想定したが、これには限らない。複数のユーザの筆跡情報を合成して表示することが考えられる如何なる場面であっても、本発明は適用可能である。
【００９１】
ところで、本実施の形態では、デジタルペン６０が筆跡情報を生成し、会議サーバ７０が筆跡情報を管理し、端末装置５０が筆跡情報の表示を要求し、会議サーバ７０が抽出条件を満たす筆跡情報を抽出するようにした。しかしながら、これらの処理を如何なる装置で行うかについては種々のバリエーションが考えられる。例えば、筆跡情報の生成は、デジタルペン６０から送られた位置情報に基づいて端末装置５０又は会議サーバ７０が行ってもよいし、筆跡情報の管理は、端末装置５０が行ってもよい。
そこで、これらの処理をコンピュータ９０で行うものとして、コンピュータ９０のハードウェア構成について説明する。
【００９２】
図２０は、コンピュータ９０のハードウェア構成を示した図である。
図示するように、コンピュータ９０は、演算手段であるＣＰＵ（Central Processing Unit）９１と、記憶手段であるメインメモリ９２及び磁気ディスク装置（ＨＤＤ：Hard Disk Drive）９３とを備える。ここで、ＣＰＵ９１は、ＯＳ（Operating System）やアプリケーション等の各種ソフトウェアを実行し、上述した各処理部を実現する。また、メインメモリ９２は、各種ソフトウェアやその実行に用いるデータ等を記憶し、磁気ディスク装置９３は、各種ソフトウェアに対する入力データや各種ソフトウェアからの出力データ等を記憶し、これらの一方又は両方が上述した各記憶部を実現する。
更に、コンピュータ９０は、外部との通信を行うための通信Ｉ／Ｆ９４と、ビデオメモリやディスプレイ等からなる表示機構９５と、キーボードやマウス等の入力デバイス９６とを備える。
【００９３】
尚、本実施の形態を実現するプログラムは、通信手段により提供することはもちろん、ＣＤ−ＲＯＭ等の記録媒体に格納して提供することも可能である。
【符号の説明】
【００９４】
１０，５０…端末装置、２０…文書サーバ、３０…識別情報サーバ、４０…画像形成装置、６０…デジタルペン、７０…会議サーバ、８０…ネットワーク
【図１】
0005444946.tif 000002
【図２】
0005444946.tif 000003
【図３】
0005444946.tif 000004
【図４】
0005444946.tif 000005
【図５】
0005444946.tif 000006
【図６】
0005444946.tif 000007
【図７】
0005444946.tif 000008
【図８】
0005444946.tif 000009
【図９】
0005444946.tif 000010
【図１０】
0005444946.tif 000011
【図１１】
0005444946.tif 000012
【図１２】
0005444946.tif 000013
【図１３】
0005444946.tif 000014
【図１４】
0005444946.tif 000015
【図１５】
0005444946.tif 000016
【図１６】
0005444946.tif 000017
【図１７】
0005444946.tif 000018
【図１８】
0005444946.tif 000019
【図１９】
0005444946.tif 000020
【図２０】
0005444946.tif 000021