(57)【要約】      （修正有）【課題】コンテンツに入力される情報から利用コンテンツのフォーマットを推定し、コンテンツ利用状態を把握する情報認識システムを提供する。【解決手段】電子コンテンツ利用筐体を基本とし、同筐体への入力行動を抽出し、同行動データ間の類似値・差分値や行動データと模範データとの類似値・差分値を計算することによってコンテンツ中のデータ入力位置を推定し、推定された入力位置からユーザの入力状況を推定し、同推定値をコンテンツ利用状況として呈示する。【選択図】図１
2009129040.tif 000002
【特許請求の範囲】
【請求項１】
入力対象であるコンテンツフォーマットを表示する第一の端末において複数のデータを入力する第一入力手段と、
入力された前記複数のデータを記憶する記憶手段と、
入力された前記複数のデータ間の類似値或いは差分値を算出し、第二の端末の第二入力手段によって標準入力或いは模範入力として入力されたデータと前記複数のデータとの類似値、差分値を算出する手段と、
該算出結果から、前記コンテンツフォーマットにおける前記複数のデータの情報入力位置を推定する手段を有することを特徴とする情報認識システム。
【請求項２】
請求項１に記載の情報認識システムにおいて、算出された前記複数のデータの情報入力位置の情報と、入力された前記複数のデータの入力位置情報との類似値、差分値から、正解入力位置と不正解入力位置を推定する手段を有することを特徴とする情報認識システム。
【請求項３】
請求項１に記載の情報認識システムにおいて、算出された前記複数のデータの情報入力位置の情報と、入力された前記複数のデータの入力位置情報との類似値、差分値から、正解値と不正解値を推定する手段を有することを特徴とする情報認識システム。
【請求項４】
請求項１に記載の情報認識システムにおいて、前記標準入力或いは模範入力として入力されたデータの入力内容情報と、入力された前記複数のデータの入力内容情報との類似値、差分値から、不正解値の種類を推定する手段を有することを特徴とする情報認識システム。
【請求項５】
請求項１または２に記載の情報認識システムにおいて、前記第一入力手段により入力されるデータの座標位置データ及び入力時刻を記憶する手段と、
前記第二入力手段により標準入力或いは模範入力として入力されたデータの入力位置の入力時刻情報と、前記第一入力手段により入力された複数の入力データの入力位置の入力時刻情報との差分値から、フォーマットの各入力位置へのアクセス回数を算出することを特徴とする情報認識システム。
【請求項６】
請求項１または２に記載の情報認識システムにおいて、前記第一入力手段により入力される座標位置データ及び入力時刻を記憶する手段と、前記第二入力手段により標準入力或いは模範入力として入力されたデータの入力位置の入力時刻情報と、前記第一入力手段により入力された複数の入力データの入力位置の入力時刻情報との差分値から、フォーマットの各入力位置へのアクセス順序傾向を抽出する手段を有することを特徴とする情報認識システム。
【請求項７】
請求項１または２に記載の情報認識システムにおいて、推定された前記コンテンツフォーマット中の情報入力位置と前記第一入力手段により入力される座標位置データ及び入力時刻を記憶する手段により得られた入力位置の入力時刻情報から、各入力位置へのアクセス時間を算出する手段を有することを特徴とする情報認識システム。
【請求項８】
請求項１または２に記載の情報認識システムにおいて、推定された前記コンテンツフォーマット中の情報入力位置と前記第一入力手段により入力される座標位置データと、入力時刻を記憶する手段により得られた入力されたデータの入力位置の連続性と、前記コンテンツフォーマットに記載されているテキストの表示位置から、連続性のある入力位置データ群が示すテキスト内容を推定する手段を有することを特徴とする情報認識システム。
【請求項９】
請求項１または２に記載の情報認識システムにおいて、前記第一端末により入力された前記複数のデータを解析した結果を同一単語頻度順、入力プロセスのパタン順に表示する手段を有することを特徴とする情報認識システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、コンテンツを利用している時間帯においてコンテンツに入力される情報から利用コンテンツのフォーマットを推定し、コンテンツ利用状態を把握する情報認識システムに関する。
【背景技術】
【０００２】
昨今のブロードバンドネットワークの普及に伴い、webコンテンツ等大容量のメディア・コンテンツが普及しつつある。例えば、webでのアンケートは、多くのポータルサービスにおいて行われており、個人ユーザの情報を収集する機能として重要であり、インターネットを利用できるユーザにアンケートを依頼できれば、グローバルに情報収集することができる。
【０００３】
一方、紙を利用したアンケートは従来からある方法であり、回収に時間が掛かったりする難点はあるが、現在も多く利用されている方法である。
しかしながら、Webを利用したネット上のコンテンツを利用したアンケートであっても紙を用いて行なわれたアンケートであっても、全体の傾向を把握するためには、入力された、或いは書き込まれたデータを集計・分析する必要がある。
この場合、現状は、まずwebコンテンツの場合は、アンケートの回答情報を入力する各テキストボックスに回答番号タグを付与しておき、同タグ番号に基づいて、同じタグ番号のテキストボックスに入力されたデータを同一の質問に対する回答とみなして集計・分析を行なっている。
【０００４】
一方、紙に書き込むアンケートの場合は、紙に書かれた回答を集計する担当者が回答内容を読み取り、集計・分析を行なう。後者については近年、デジタルペンという紙に書いた位置データが取得できる機能を持つペンシステムにより、紙上での筆記位置・時刻データが読み取れ、電子的に情報を格納できるようになってきており、この場合においては、紙上に回答記入領域を設定し、同領域内に記入されたデータを回答データとみなして集計・分析する。
【０００５】
また、従来の分析手法としては、webコンテンツの場合、同コンテンツ内に設定されている回答入力用テキストボックスに対して入力が行なわれた時刻を用いて、アンケートの各質問に対しての回答順序を抽出したり、入力された内容を用いて、内容の正誤を判断したりする機能がある（特許文献１、特許文献２、特許文献３）。またデジタルペンを利用して入力を行なうコンテンツの場合、上記に記載したような回答記入領域に対する入力時刻によって回答順序を抽出したり、入力された内容については文字認識技術を用いるなどすることによって、内容の正誤を判断したりする機能がある（特許文献４、特許文献５）。
【０００６】
【特許文献１】特開2002-149048
【特許文献２】特開2004-229948
【特許文献３】特開2005-352877
【特許文献４】特開2004-265272
【特許文献５】特開2004-127197
【発明の開示】
【発明が解決しようとする課題】
【０００７】
特許文献１、特許文献２、特許文献３は、例えば、教育用のＰＣ用webコンテンツ或いは評価対象となるインタフェースに対して学習中に記録した学習者のＰＣ操作ログと正解操作データとを比較・分析することで、操作型学習の評価を行なう。
しかしながら、対象となるコンテンツやインタフェースの各入力箇所には、入力されるデータを取得する機能が組み込まれており、この機能が組み込まれることで入力内容や時刻を取得することが可能になる。したがって、入力内容を取得するには、各入力箇所にこの機能を組み込んでおく必要があるが、必要となるコンテンツ全てに本機能を組み込むのは困難である。
【０００８】
また、特許文献４、特許文献５の装置は、デジタルペンを用いて筆記情報を取得し、筆記領域内に記載された筆記情報から筆記内容の正誤を判断している。しかし、この場合も筆記すべき領域を予め登録しておく必要があり、その登録に時間がかかるのが通常である。そのため、大量のコンテンツに関して短時間にユーザの入力過程を抽出したり視覚化したりすることが出来ず、十分な機能を果たすことはできない。
【課題を解決するための手段】
【０００９】
本願において開示される発明のうち、代表的なものの概要を簡単に説明すれば、下記のとおりである。パソコン、携帯電話といった電子コンテンツ利用筐体を基本とし、同筐体への入力行動（データ入出力（入出力データ（入力テキスト、表示内容））を抽出し、同行動データ間の類似値・差分値や行動データと模範データとの類似値・差分値を計算することによってコンテンツ中のデータ入力位置を推定し、推定された入力位置からユーザの入力状況を推定し、同推定値をコンテンツ利用状況として呈示する。
【発明の効果】
【００１０】
本発明により、ユーザやコンテンツフォーマットを意識することなくユーザがコンテンツ利用をしている中で入出力する情報からユーザのコンテンツ利用状態を推定し、開発されたコンテンツの評価を行なうことができる。また大量のコンテンツに対する評価を簡便かつ迅速に行なうことができるため、利用された結果をそのまま反映させてwebコンテンツやその他コンテンツの開発指針を迅速に立てることが可能になる。また、ユーザ自身のコンテンツ嗜好や利用傾向を把握することができるため、ユーザに必要な情報を適切に提供することができるようになる。
【発明を実施するための最良の形態】
【００１１】
本発明を実施するための一形態であるコンテンツフリーフォーマット認識装置を図１に示す。
【００１２】
まず、システム構成の例と機能の例について述べる。本システムは、図１に示すように、サーバ・クライアント型で構成され、サーバ環境のユニットとしては、コンテンツ管理やデータ解析を行なうデータ管理・解析用サーバ１０１と紙コンテンツを使う場合に利用するデジタルペンサーバ１０２がある。
【００１３】
一方、クライアント環境のユニットとしては、コンテンツを利用するユーザの端末として、ユーザ用端末ＰＣ１０３、コンテンツ評価者用端末ＰＣ１０４、デジタルペン１０５、及びデジタルペン用紙１０６がある。データ管理・解析用サーバ１０１では、コンテンツデータベースの管理、ユーザ登録・管理、クライアントソフトとの通信処理、イベントの解析処理を行なう。
【００１４】
デジタルペンサーバ１０２は、図３に示すように、CPU１０２１、プログラム格納メモリ１０２２がある。本メモリには、システムプログラム１０２２０１、データ送受信プログラム１０２２０２、ユーザイベントデータ解析プログラム１０２２０３、文字認識プログラム１０２２０４、デジタルペン用フォーマット推定プログラム１０２２０５、イベント領域移動過程認識プログラム１０２２０６が搭載されている。さらに、ハードディスク１０２３には、単語辞書１０２３０１と認識結果データ１０２３０２が格納される。
【００１５】
本サーバは、クライアント環境に設定されているデジタルペン１０５及びデジタルペン用紙１０６を利用した結果として得られるデジタルペン情報を格納・解析する機能を持ち、解析結果をデータ管理・解析用サーバ１０１に送信する。
【００１６】
データ管理・解析用サーバ１０１には、図２に示すように、CPU１０１０１、プログラム格納メモリ１０１０２、ハードディスク１０１０３が搭載されている。プログラム格納メモリに搭載されているプログラムは、システムプログラム１０１０２０１、データ蓄積プログラム１０１０２０２、コンテンツ管理プログラム１０１０２０３、ユーザイベント情報解析プログラム１０１０２０４、解析結果表示用プログラム１０１０２０５である。また、ハードディスク１０１０３に格納されているデータは、ユーザイベントデータ１０１０３０１、標準入力データ１０１０３０２、フォーマット推定結果データ１０１０３０３、コンテンツデータ１０１０３０４である。
【００１７】
本発明でのデータ管理・解析用サーバの役割は、主として、ユーザイベント情報解析プログラム１０１０２０４を用いることによって、クライアントＰＣから送信された、コンテンツ毎の複数名の解答結果であるイベント情報を、イベントログの種類、イベント発生位置、イベント発生時刻を軸として解析し、イベント発生が重複している領域をユーザの入力領域として指定された領域であると仮定して、ユーザイベント発生領域を抽出する。さらに、ユーザイベント発生領域において入力された内容の比較を行なって、同一情報のことを目的として、発生領域にて発生したテキスト入力情報であるユーザイベントデータ１０１０３０１とクライアント側で基準データとして入力される標準解答データ１０１０３０３とのマッチングを行ない、以下の解答内容・プロセスを抽出する。
【００１８】
ユーザ個人単位での解答内容・プロセスとしては、 (a)解答の正誤、(b)解答所要時間、(c)解答順序、(d)解答回数を算出し、集団としては、(a)解答正誤比率、(b)各設問における解答所要時間分布、(c)解答順序傾向（パタン分類）、(d)解答回数分布  を算出する。
【００１９】
キーボード・マウスデバイスによる入力については、解答の正誤、解答正誤比率、はユーザイベント解析プログラムのサブプログラムであるテキスト解析プログラムによって、個々のユーザがユーザイベント発生領域と推定された位置に入力した情報のテキスト解析を行ない、同一の単語やセンテンスが存在しているかどうかをマッチングする。
【００２０】
一方、デジタルペンで入力を行なった場合は、文字認識機能を搭載することによって、ユーザイベント発生領域に発生したデジタルペン入力情報であるユーザイベントデータ１０１０３０１を認識し、テキスト情報に変換するという手段を用いる。
【００２１】
クライアント側について、コンテンツを利用するユーザが利用する機器としては、ユーザ用端末１０３、コンテンツ評価者用端末１０４及びデジタルペン１０５、デジタルペン用紙１０６が設定されている。
【００２２】
ユーザ用端末であるＰＣとデジタルペン、コンテンツ評価者用端末であるＰＣとデジタルペンは、例えば、ＵＳＢで接続され、デジタルペンで記入されたデータは、各ＰＣを介してデジタルペンサーバに送信される。
【００２３】
各ＰＣで発生したデジタルペンのユーザイベントデータ以外のデータは、各ＰＣからデータ管理・解析用サーバ１０１に送信される。ここで、テスト等、正しい解答が必要な場合やアンケートで標準解答との差分を抽出したい場合には、例えば、コンテンツ評価者が、各ユーザイベント発生領域に、別途正解や標準解答を登録し、実解答との差分を抽出することができる。コンテンツの選択、各コンテンツの標準解答入力の実行、実行時のイベント記録、各コンテンツへの解説入力を行なうと、その結果をサーバに送信する。標準解答として、複数パタンの標準解答を入力することが可能である。
【００２４】
対象コンテンツは、例えば、web形式コンテンツとデジタルペン対応紙ベースコンテンツ、の２種類のコンテンツとする。ユーザが選択したコンテンツがweb形式コンテンツであった場合、ユーザはまず、コンテンツ利用プログラムを起動し、図６（ａ）に示すようなページをユーザ端末画面６０１に表示する。ここで、コンテンツに対して回答を行なう場合には、図１３に示すように「アンケート回答ページへ」を選択すると、アンケート回答ページへと遷移する。「回答結果閲覧ページ」ボタン選択した場合は、閲覧ページへ遷移する。遷移したページに、例えば、コンテンツの選択メニューが表示され、ユーザが所望のコンテンツを選択すると、ユーザ用端末が、例えば、自動的にデータ管理・解析用サーバのハードディスクに格納されているページをコンテンツ利用プログラムによって、同サーバのコンテンツ管理プログラムを介して同サーバのハードディスクに格納されているコンテンツデータから選択されているコンテンツを呼び出し、ユーザ用端末上に表示する。
【００２５】
ユーザが「アンケート回答ページへ」を選択した場合は、図７に示すように、ユーザはweb上で回答を行なってコンテンツのウィンドウを閉じる事で、回答状態が終了し、イベント収集も終了する。ユーザがマウス、キーボードを介して入力したイベントの記録はユーザ用端末の解析用情報入力プログラムによって行なう。回答が終了し、webコンテンツを終了すると、データ送受信制御プログラムによって入力したユーザイベントデータが、データ管理・解析用サーバに自動送信される。ユーザイベントデータは、ハードディスクにもサーバ送信と共に蓄積しておくこともできる。
【００２６】
一方、デジタルペンを利用した紙ベースコンテンツを対象とした場合も最初のステップは、図１３と同様であるが、コンテンツを選択した後は、図８のフローに示すように、ＰＣ上のＰＤＦファイルをダウンロードして印刷を行ない、デジタルペンを用いて解答し、解答を終了する。
ユーザがデジタルペンを介して入力したイベントの記録はデジタルペン及びデジタルペンサーバが行なう。記入時に利用したデジタルペンをユーザ用端末に接続されているデジタルペンボックスに格納すると、デジタルペンに格納されているイベント情報が、ユーザ用端末を介して、デジタルペンサーバへ記録される。その後、管理者がデジタルペンサーバからユーザ入力イベントデータを取り出し、データ管理・解析用サーバへ登録する。ユーザを識別するペンIDは、予めデータ管理・解析用サーバに登録し、ログインでのユーザ識別と同様のデータとして取り扱う。
【００２７】
また、コンテンツ評価者は、コンテンツ評価者用端末から標準入力データを入力することができる。これは先に示したように、テストのような正誤情報が必要な場合や、アンケートにおいて標準回答との分散を観察したい場合に行なう。
【００２８】
入力方法は、ユーザ用端末への入力と同様であり、コンテンツ評価者がコンテンツ利用プログラムを起動し、図６（ｂ）や図１４に示すように「標準回答入力ページへ」を選択すると、コンテンツ選択メニューが表示され、ユーザが標準入力を行なうコンテンツを選択すると、データ管理・解析用サーバのコンテンツ管理プログラムを介して該当するコンテンツが選択され、コンテンツ評価者用端末にコンテンツが表示される。またデジタルペン入力の場合もユーザ用端末への入力と同様のフローである。
【００２９】
利用者がコンテンツに回答するユーザであるのかコンテンツ評価者であるのかは、例えば、ログインのＩＤで識別する。また、入力された標準回答は、別ファイルとして複数登録しておくことも可能である。
【００３０】
以下、ユーザによる情報入力位置であるユーザ入力イベント発生領域の推定方法について説明する。サーバでは、ユーザイベントデータ解析プログラムが起動されている。ユーザイベントデータ解析プログラムは、データ蓄積プログラムによって蓄積されたユーザ入力イベントデータを用いて解析を行なう。
【００３１】
図１５に示すように、まず、データ管理・解析用サーバが、ユーザ用端末１０３から解析対象を指定するデータを受信し、複数のユーザ端末から送信されたイベントデータをコンテンツ単位に分類する。ここでは、ユーザＩＤとコンテンツに付与されているコンテンツＩＤによって分類を行なう。次に、標準回答の有無を判断する。
【００３２】
標準回答が無い場合には、複数ユーザのイベントデータのイベント入力位置情報から情報入力位置を推定する。例えば、以下の順序にしたがって実施する。
【００３３】
イベント入力時刻nと入力時刻n+1間に、例えば、複数ユーザイベントデータを平均して2s以上の差分があり、かつ複数ユーザのデータをページ領域に重畳した場合に、イベント入力時刻nに入力されたイベント位置p(x,y)の前後距離（p[ i ] - p[ i-1 ]）が ページ領域を最大として、例えば、平均して横２ｃｍあるいは縦３ｃｍ以上であった場合には、nとn+1間に問題間の間隙があるとして、間隙数m+1(0-j)を問題数と推定する。さらに、推定された各問題に対する解答入力初端の座標値及びnに代表される各問題に対する解答終端の座標値を問題[i=0-m]に対応付けて格納しておく。または、マウスクリック位置とキーボード入力初端座標位置が同一の場合に、当該位置にイベント発生領域があると推定する。さらに、イベント発生領域間の移動過程をイベント発生時刻とイベント発生領域から抽出し、当該入力データと移動過程をメモリに格納する。次に、格納された複数ユーザの移動過程データから回答パタン毎の頻度を抽出し、同一イベント発生領域内において記載或いは選択されたテキストデータを比較し、頻度を付与した回答パタンと共に同比較データをメモリに格納する。
【００３４】
次に、標準パタンが有る場合の情報入力位置の推定方法について説明する。入力されている標準パタンと複数のユーザ入力イベントデータを用いてイベント発生領域の推定を行なう。まず、ユーザ入力イベントデータの入力イベント座標値と標準パタンの各問題における入力イベント座標値とを照合し、ユーザの各解答位置を推定する。照合した結果、標準パタンの解答初端座標値及び終端座標値と適合した座標値を、各問題に対する解答初端及び終端と推定する。次に、複数ユーザ間の回答内容の分散や回答の正誤を判断するために、推定されたイベント発生領域における入力データ（テキスト情報）を領域毎に抽出する。さらに、イベント発生領域間の移動過程をイベント発生時刻とイベント発生領域から抽出し、当該入力データと移動過程をメモリに格納する。次に、格納された複数ユーザの移動過程データから回答パタン毎の頻度を抽出し、同一イベント発生領域内において記載或いは選択されたテキストデータと標準入力において同領域に記載されたデータを比較し、頻度を付与した回答パタンと共に同比較データをメモリに格納する。
【００３５】
また、デジタルペンを利用した場合は、図１６のフローに示すように、各ユーザ用端末からデータ管理・解析用サーバがデジタルペンのユーザイベントデータを受信する。この時点で、デジタルペン用フォーマット推定プログラムを起動し、入力されたデジタルペンのユーザ入力イベントデータを解析し、フォーマット推定を行なう。
【００３６】
はじめに、デジタルペンのイベント入力共通領域を複数ユーザの入力イベントデータを重畳することによって抽出する。共通領域の連続性からイベント発生領域を推定する。
具体的には、例えば、紙領域を１ｃｍメッシュ領域で切り分け、重畳したイベントデータが入っているメッシュが隣接している領域を抽出することによって、イベント発生領域を推定する。ここで推定されたイベント発生領域を座標値でメモリに格納しておく。
次に、イベント発生領域移動過程認識プログラムの起動し、ユーザイベントデータのイベント発生時刻とイベント発生領域から移動過程を抽出する。
次に、各ユーザの移動過程を集計し、移動パタン（回答順序パタン）を抽出し、回答順序パタンの頻度を算出し、メモリに格納しておく。次に、文字認識プログラムを起動し、同プログラムによって、イベント発生領域において発生したイベント情報からテキストを抽出する。
ここで、文字認識プログラムでテキストを抽出した際、認識結果が線状・形状であった場合（直線、波線、円状）には、直線・波線の直上に記載されているテキスト、円内にコンテンツの内容として記載されているテキストを抽出する。最後に、イベント発生領域内テキストの比較、直線上・波線上・円内のテキスト情報のユーザデータ間比較を行ない、比較結果をメモリに格納する。
【００３７】
次に、格納したイベント発生領域（問題数、回答位置）、イベント発生領域内テキスト情報、イベント発生位置に隣接したテキスト情報を用いて、ユーザ状態を判断する。ここでは各判断基準の例を示す。
（無記入の判断）
イベント領域i(問題i)の解答初端及び終端に適合する入力イベント座標値が無い場合には、無記入であると判断する。
（正解・不正解・正解への近さの判断）
各問題に対して入力された標準パタンとユーザイベントを照合する。はじめに標準パタンと同一のイベント或いはテキスト情報を検索する。ユーザイベントと標準パタンのイベント或いはテキスト情報が同一であった場合には「正解」と判断し、判断値k[i]において  k[i]=0を返し、情報管理・制御サーバに送信する。ユーザイベント中に標準パタンのイベントが含まれていて、かつ同イベントがユーザイベントの終端に存在した場合には「正解」と判断し、判断値  k[i]=1を返し、情報管理・制御サーバに送信する。
【００３８】
一方、ユーザイベント中に標準パタンのイベントが含まれているが、終端に存在しない場合には、「迷って不正解」と判断し、判断値  k[i] =2を返し、情報管理・制御サーバに送信する。ユーザイベントに標準パタンイベントが含まれていない場合には、「不正解」と判断し、判断値  k[i]=3を返し、情報管理・制御サーバに送信する。以上の値、及び各問題における標準パタンイベントとユーザ入力イベントとの照合数/ユーザ入力イベント数の値h[i]を正解への近さの値として登録する。またデジタルペンデータの場合、認識結果が線状・形状であった場合（直線、波線、円状）には、直線・波線の直上に記載されているテキスト、円内にコンテンツの内容として記載されているテキスト間の比較を行ない、正解・不正解を上記と同様な形で判断する。
（解答時間の判断）
各問題に対する標準パタンの回答初端時刻と終端時刻の差分と、各問題に対するユーザの回答初端及び終端時刻の差分との差分値d[i]を、標準入力時間を基準値とした解答変動時間と推定する。
【００３９】
上記の方法で入力領域の推定及び解答内容・プロセスの抽出を行なう。さらに複数名のコンテンツユーザから得た解答データからユーザ集団の傾向及びパタン分類を行なうことによって各コンテンツに対する評価傾向を抽出する。
【００４０】
次に、解析結果を表示する。上記のように解析された結果は、はじめに、図１７に示すように、データ管理・解析用サーバ上の解析結果表示用プログラムにより、解析結果表示用データに変換される。まず、解析結果表示用プログラムを起動され、抽出された解析結果から、イベント発生領域毎の回答結果の分散・頻度を集計する。また、回答パタン（問題Ａ→問題Ｂ・・・、問題Ｂ→問題Ａ・・・）毎の頻度を集計し、グラフ化データとして整理する。最終的に、ユーザ用端末、コンテンツ評価者用端末から配信トリガが掛かった時に上記データを配信する。
【００４１】
図９は、ユーザ用端末において、図６（ａ）における「回答結果閲覧ページへ」を選び、遷移したページに表示されたコンテンツ選択メニューから所望のコンテンツを選択した時に表示される画面である。「回答順序パタン」と「回答結果」が表示される。複数の「回答順序パタン」は、例えば頻度順に並べられる。また、ユーザの回答順序は、例えば、パタンに付与されている番号が囲まれる形で明示される。回答結果は、各問題・アンケートに対して回答の種類が、例えば頻度順に並べられる。正解・或いは標準回答には、回答の下に「正解」あるいは「標準回答」という記載がある。
【００４２】
ユーザ自身の回答は、例えば、同一の回答表示領域に色づけされている。さらに、個々の問題・アンケートの回答過程（即正解、迷って正解、即誤り、迷って誤り）が画像パタン（斜線、スクエア・・・）によって表示される。図１０に示すように、コンテンツ評価者用端末においても同様の表示が行なわれる。また、コンテンツと解析結果を併記する場合、図１１に示すように、画面上に、上記に示したような「回答順序パタン」と「回答結果」と共に、ユーザイベント発生領域として推定された位置に各問題を示すシンボル(ここでは、A、B・・)が表示される。また、図１２中の「Ｂ」に示すように、デジタルペンを利用して線状、波線状、円状のデータについては、該データのテキスト下にイベントデータの座標値を元に筆記データを表示する。
【図面の簡単な説明】
【００４３】
【図１】本発明の実施形態のシステム構成を示すブロック図の一例。
【図２】データ管理・解析用サーバ１０１の構成を示すブロック図の一例。
【図３】デジタルペンサーバ１０２の構成を示すブロック図の一例。
【図４】ユーザ用端末の構成を示すブロック図の一例。
【図５】コンテンツ評価者用端末の構成を示すブロック図の一例。
【図６】ユーザ用端末、コンテンツ評価者用端末の入力画面の一例。
【図７】コンテンツ種類別のイベント入力フロー（web形式）の一例。
【図８】コンテンツ種類別のイベント入力フロー（デジタルペン利用）の一例。
【図９】ユーザ用端末の閲覧画面の一例。
【図１０】コンテンツ評価者用端末の閲覧画面の一例。
【図１１】Web形式コンテンツの閲覧画面の一例。
【図１２】デジタルペン形式コンテンツの閲覧画面の一例。
【図１３】ユーザ用端末における処理のフローの一例。
【図１４】コンテンツ評価者用端末における処理フローの一例。
【図１５】ユーザイベントデータ解析プログラム１０１０２０４における解析処理フロ一の例。
【図１６】デジタルペン用フォーマット推定プログラム及びイベント領域移動過程認識プログラムによるイベント解析のフローの一例。
【図１７】データ管理・解析用サーバ上の解析結果表示用プログラムによる解析結果表示のフローの一例。
【符号の説明】
【００４４】
１：ネットワーク、１０１：データ管理・解析用サーバ、１０２：デジタルペンサーバ、
１０３：ユーザ用端末  、１０４：コンテンツ評価者用端末、１０５：デジタルペン、１０６：デジタルペン用紙。
【図１】
2009129040.tif 000003
【図２】
2009129040.tif 000004
【図３】
2009129040.tif 000005
【図４】
2009129040.tif 000006
【図５】
2009129040.tif 000007
【図６】
2009129040.tif 000008
【図７】
2009129040.tif 000009
【図８】
2009129040.tif 000010
【図９】
2009129040.tif 000011
【図１０】
2009129040.tif 000012
【図１１】
2009129040.tif 000013
【図１２】
2009129040.tif 000014
【図１３】
2009129040.tif 000015
【図１４】
2009129040.tif 000016
【図１５】
2009129040.tif 000017
【図１６】
2009129040.tif 000018
【図１７】
2009129040.tif 000019