(57)【要約】  【課題】  正答が一意に定まらない設問に対する答案の採点、採点を行う採点者の評価、及び採点の基準の見直しを支援する採点支援方法、採点支援システム、採点支援装置、採点管理装置及びコンピュータプログラムを提供する。  【解決手段】  採点者に対し、採点支援装置１は、当該採点者による採点結果と、他の採点者による採点結果とを出力する。採点者の採点結果を管理する採点管理者に対し、採点管理装置２は、複数の採点者の採点結果が一致しない場合に、点数を含む採点結果及び採点根拠を出力し、最終的な採点結果の入力を受け付ける。また採点管理装置２は、採点者別の分析結果を集計して出力する。さらに採点管理装置２は、答案に対する採点結果を集計して出力する。【選択図】      図１
2006277086.tif 000002
【特許請求の範囲】
【請求項１】
記述式試験の設問の答案に対する採点者毎の採点結果を受け付ける採点支援装置を用い、答案に対する採点を支援する採点支援方法において、
前記採点支援装置は、
一の答案に対応付けて、各採点者の夫々の採点結果を記録している採点結果データベースから、一の答案に対応する一の採点者の採点結果及び他の採点者の採点結果を抽出し、
抽出した採点結果を出力し、
一の採点者の採点結果の修正を受け付け、
修正した採点結果に基づいて、採点結果データベースに記録されている採点結果を更新する
ことを特徴とする採点支援方法。
【請求項２】
記述式試験の設問の答案に対する複数の採点者の採点結果の管理を支援する採点管理装置を用い、答案に対する採点を支援する採点支援方法において、
一の答案に対応付けて、採点者、並びに該採点者による答案に対する点数及び採点根拠を含む採点結果を記録し、
一の答案に対応付けて記録されている各採点者の採点結果に含まれる点数を比較して、点数の差が所定範囲内であるか否かを判定し、
所定範囲を外れると判定した場合に、点数の差が所定範囲を外れる答案に対する点数及び採点根拠を含む複数の採点結果を前記採点管理装置から出力し、
一の答案に対して決定された採点結果を前記採点管理装置にて受け付け、
受け付けた採点結果を記録する
ことを特徴とする採点支援方法。
【請求項３】
記述式試験の設問の答案に対する採点者毎の採点結果の管理を支援する採点管理装置を用いた採点支援方法において、
前記採点管理装置は、
集計に係る区分の指定を受け付け、
受け付けた区分に基づいて、予め記録されている採点結果を集計し、
集計した区分別の採点結果を出力し、
区分の指定及び指定された区分に係る採点結果の変更を受け付け、
受け付けた変更に基づいて、指定された区分の採点結果の記録を更新する
ことを特徴とする採点支援方法。
【請求項４】
記述式試験の採点を支援する採点支援システムにおいて、
試験の設問の答案に対する採点者毎の採点結果を受け付ける採点支援装置と、
一の答案に対応付けて、前記採点支援装置が受け付けた各採点者の夫々の採点結果を記録する採点結果データベースと
を備え、
前記採点支援装置は、
採点結果データベースから、一の答案に対する一の採点者の採点結果及び他の採点者の採点結果を抽出する手段と、
抽出した採点結果を出力する手段と、
一の採点者の採点結果の修正を受け付ける手段と、
修正した採点結果に基づいて採点結果データベースに記録されている採点結果を更新する手段と
を備えることを特徴とする採点支援システム。
【請求項５】
記述式試験の採点を支援する採点支援システムにおいて、
試験の設問の答案に対する点数及び採点根拠を含む採点結果を、採点者毎に受け付ける採点支援装置と、
該採点支援装置による採点結果の管理を支援する採点管理装置と、
一の答案に対応付けて、採点者、及び前記採点支援装置が受け付けた採点結果を記録する採点結果データベースと、
答案に対する決定された採点結果を記録する決定採点結果データベースと、
一の答案に対応付けられている複数の採点結果を、採点結果データベースから抽出する手段と、
抽出した一の答案に対応付けられている複数の採点結果に含まれる点数を比較して、点数の差が所定範囲内であるか否かを判定する判定手段と
を備え、
該判定手段により、所定範囲を外れると判定した場合に、
前記採点管理装置は、
点数の差が所定範囲を外れる答案に対する複数の採点結果を出力する手段と、
一の答案に対して決定された採点結果を受け付ける手段と、
受け付けた採点結果を決定採点結果データベースに記録する手段と
を備えることを特徴とする採点支援システム。
【請求項６】
一の採点者に対応付けて、一の採点者による採点結果を他の採点結果と比較した比較結果を記録する採点者分析データベースと、
採点者に対応付けて、設問に対する採点の可否を記録する採点可否データベースと
を更に備え、
前記採点管理装置は、更に、
前記判定手段により、所定範囲を外れると判定した場合に、
複数の点数の差が所定範囲を外れる採点結果に係る採点者の比較結果を採点者分析データベースから抽出する手段と、
抽出した比較結果を出力する手段と、
採点者に対応する採点の可否の入力を受け付ける手段と、
受け付けた採点の可否を採点可否データベースに記録する手段と
を備えることを特徴とする請求項５に記載の採点支援システム。
【請求項７】
前記採点者分析データベースは、設問に対する所定の区分毎の比較結果を記録してあり、
前記採点可否データベースは、設問の区分に対する採点の可否を記録してあり、
前記採点の可否は、設問の区分に対する採点の可否である
ことを特徴とする請求項６に記載の採点支援システム。
【請求項８】
答案データベースに記録されている一の答案に対応付けて、前記採点支援装置が受け付けた各採点者の最初の採点結果を記録する一次採点結果データベースを更に備え、
前記採点者分析データベースは、一次採点結果データベースに記録されている各採点者の最初の採点結果に基づく比較結果を記録してある
ことを特徴とする請求項６又は請求項７に記載の採点支援システム。
【請求項９】
設問に対応付けて、採点基準を記録する設問別採点基準データベースと、
設問に対応付けて、採点結果の集計結果を記録する採点結果分析データベースと
を更に備え、
前記採点管理装置は、更に、
前記判定手段により、所定範囲を外れると判定した場合に、
複数の点数の差が所定範囲を外れる設問に係る採点結果の集計結果を採点結果分析データベースから抽出する手段と、
抽出した集計結果を出力する手段と、
設問に対応する採点基準に対する変更の入力を受け付ける手段と、
受け付けた変更の入力に基づいて、設問別採点基準データベースに記録されている採点基準を更新する手段と
を備えることを特徴とする請求項６乃至請求項８のいずれかに記載の採点支援システム。
【請求項１０】
前記採点管理装置は、更に、
前記採点結果データベースから採点結果を抽出する手段と、
抽出した採点結果を、所定の区分別に集計する手段と、
集計した区分別の採点結果を出力する手段と、
区分の指定及び区分に係る採点結果に対する変更の入力を受け付ける手段と、
受け付けた変更の入力に基づいて、採点結果データベースに記録されている指定された区分の採点結果を更新する手段と
を備えることを特徴とする請求項６乃至請求項９のいずれかに記載の採点支援システム。
【請求項１１】
記述式試験の設問の答案に対する採点者毎の採点結果を受け付ける採点支援装置において、
一の答案に対応付けて、各採点者の夫々の採点結果を記録する採点結果データベースにアクセスする手段と、
採点結果データベースから、一の答案に対する一の採点者の採点結果及び他の採点者の採点結果を抽出する手段と、
抽出した採点結果を出力する手段と、
一の採点者の採点結果の修正を受け付ける手段と、
修正した採点結果に基づいて採点結果データベースに記録されている採点結果を更新する手段と
を備えることを特徴とする採点支援装置。
【請求項１２】
記述式試験の設問の答案に対する複数の採点者の採点結果の管理を支援する採点管理装置において、
一の答案に対応付けて、採点者、並びに該採点者による答案に対する点数及び採点根拠を含む採点結果を記録する採点結果データベースにアクセスする手段と、
答案に対する決定された採点結果を記録する決定採点結果データベースにアクセスする手段と、
一の答案に対応付けられている複数の採点結果に含まれる点数の差が所定範囲を外れる場合に、複数の採点結果を採点結果データベースから抽出する手段と、
抽出した点数及び採点根拠を含む複数の採点結果を出力する手段と、
一の答案に対して決定された採点結果を受け付ける手段と、
受け付けた採点結果を決定採点結果データベースに記録する手段と
を備えることを特徴とする採点管理装置。
【請求項１３】
記述式試験の設問の答案に対する採点者毎の採点結果の管理を支援する採点管理装置において、
一の答案に対応付けて、各採点者の点数を含む採点結果を記録する採点結果データベースにアクセスする手段と、
採点結果データベースから採点結果を抽出する手段と、
集計に係る区分の指定を受け付ける手段と、
抽出した採点結果を、受け付けた区分に基づいて集計する手段と、
集計した区分別の採点結果を出力する手段と、
区分の指定及び指定された区分に係る採点結果に対する変更の入力を受け付ける手段と、
受け付けた変更の入力に基づいて、採点結果データベースに記録されている指定された区分の採点結果を更新する手段と
を備えることを特徴とする採点管理装置。
【請求項１４】
データベースにアクセスする手段を備えるコンピュータに、記述式試験の設問の答案に対する採点者毎の採点結果を受け付けさせるコンピュータプログラムにおいて、
コンピュータに、一の答案に対応付けて、前記採点支援装置が受け付けた各採点者の夫々の採点結果を記録する採点結果データベースにアクセスして、一の答案に対する一の採点者の採点結果及び他の採点者の採点結果を抽出させる手順と、
抽出した採点結果を出力させる手順と、
一の採点者の採点結果の修正を受け付けた場合に、受け付けた採点結果に基づいて採点結果データベースに記録されている採点結果を更新させる手順と
を実行させることを特徴とするコンピュータプログラム。
【請求項１５】
データベースにアクセスする手段を備えるコンピュータに、記述式試験の設問の答案に対する複数の採点者の採点結果の管理を支援させるコンピュータプログラムにおいて、
一の答案に対応付けて、採点者、並びに該採点者による答案に対する点数及び採点根拠を含む採点結果を記録する採点結果データベースに記録されている、採点結果に含まれる点数の差が所定範囲を外れる場合に、
コンピュータに、一の答案に対応付けられている点数及び採点根拠を含む複数の採点結果を抽出させる手順と、
コンピュータに、抽出した点数及び採点根拠を含む複数の採点結果を出力させる手順と、
コンピュータに、一の答案に対して決定された採点結果を受け付けさせる手順と、
コンピュータに、受け付けた採点結果を、答案に対する決定された採点結果を記録する決定採点結果データベースに記録させる手順と
を実行させることを特徴とするコンピュータプログラム。
【請求項１６】
データベースにアクセスする手段を備えるコンピュータに、記述式試験の設問の答案に対する採点者毎の採点結果の管理を支援させるコンピュータプログラムにおいて、
コンピュータに、一の答案に対応付けて、各採点者の点数を含む採点結果を記録する採点結果データベースにアクセスして、採点結果を抽出させる手順と、
コンピュータに、集計に係る区分の指定を受け付けさせる手順と、
コンピュータに、抽出した採点結果を、受け付けた区分に基づいて集計させる手順と、
コンピュータに、集計した区分別の採点結果を出力させる手順と、
コンピュータに、区分の指定及び指定された区分に係る採点結果に対する変更の入力を受け付けさせる手順と、
コンピュータに、受け付けた変更の入力に基づいて、採点結果データベースに記録されている指定された区分の採点結果を更新させる手順と
を実行させることを特徴とするコンピュータプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、記述式試験の採点を支援する採点支援方法、該採点支援方法を適用した採点支援システム、該採点支援システムにて用いられる採点支援装置及び採点管理装置、並び該採点支援装置及び採点管理装置を実現するためのコンピュータプログラムに関し、特に複数の採点者の採点結果に基づいて採点の適正化を実現する採点支援方法、採点支援システム、採点支援装置、採点管理装置及びコンピュータプログラムに関する。
【背景技術】
【０００２】
記述式試験の答案用紙を読み取って作成した答案イメージをサーバコンピュータにて管理し、採点者が使用するクライアントコンピュータを用いてサーバコンピュータに記録されている答案イメージを抽出して出力することで、採点者の採点効率及び採点精度を向上させる電子採点システムに関する特許が成立している（特許文献１参照。）。
【０００３】
また記述式試験の設問に対し、複数の採点者が同一の答案を採点する答案採点処理システムが提案されている（特許文献２参照。）。
【特許文献１】特許第３５７９５９９号公報
【特許文献２】特開２００４−０２９１０７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら特許文献１に開示された従来のシステムは、正答が一意に定まる設問に対する答案の採点を前提として発明されたものであるため、正答が一意に定まらない設問に対する答案の採点に対して適用することはできないという問題がある。
【０００５】
特許文献２に開示された従来のシステムは、正答が一意に定まらない設問に適用することが可能であり、複数の採点者の採点結果が一致しない設問を抽出し、リスト出力する内容が開示されているが、リスト出力するだけで、採点に対する評価、不一致原因の追及等の出力後の対応に関する内容については一切考慮されていないという問題がある。
【０００６】
本発明は斯かる事情に鑑みてなされたものであり、正答が一意に定まらない記述式試験の設問に対する答案について、採点者に対し、当該採点者による採点結果と、他の採点者による採点結果とを出力し、当該採点者による採点結果の修正を受け付ける様にすることにより、採点者の採点を支援することが可能な採点支援方法、該採点支援方法を適用した採点支援システム、該採点支援システムに用いられる採点支援装置、及び該採点支援装置を実現するためのコンピュータプログラムの提供を目的とする。
【０００７】
さらに本発明は、複数の採点者の採点結果が一致しない場合に、採点結果及び採点根拠を出力することにより、単なるリスト出力ではなく、最終的な採点結果の決定の判断、採点結果が一致しない原因の追求等の採点後の対応を支援することが可能な採点支援方法、該採点支援方法を適用した採点支援システム、該採点支援システムにて用いられる採点管理装置、及び該採点管理装置を実現することが可能なコンピュータプログラムの提供を他の目的とする。
【０００８】
また本発明は、採点結果を区分毎に集計し、採点結果を一括して変更することにより、採点結果の調整作業を支援することが可能な採点支援方法、採点支援システム、採点管理装置及びコンピュータプログラムの提供を更に他の目的とする。
【課題を解決するための手段】
【０００９】
第１発明に係る採点支援方法は、記述式試験の設問の答案に対する採点者毎の採点結果を受け付ける採点支援装置を用い、答案に対する採点を支援する採点支援方法において、前記採点支援装置は、一の答案に対応付けて、各採点者の夫々の採点結果を記録している採点結果データベースから、一の答案に対応する一の採点者の採点結果及び他の採点者の採点結果を抽出し、抽出した採点結果を出力し、一の採点者の採点結果の修正を受け付け、修正した採点結果に基づいて、採点結果データベースに記録されている採点結果を更新することを特徴とする。
【００１０】
本発明では、一の採点者が操作する採点支援装置から、一の採点者の採点結果及び他の採点者の採点結果を出力し、一の採点者の採点結果の修正を可能とすることにより、正答が一意に定まらない記述式試験の設問に対する答案を採点する場合に、一の採点者は、他の採点者の採点結果を参照し、自らの採点結果を修正することができるので、自らが行った主観的な採点結果にとらわれず、様々な視点から答案を再評価することができるので、採点者が適正な採点を行うことを支援することが可能である。
【００１１】
第２発明に係る採点支援方法は、記述式試験の設問の答案に対する複数の採点者の採点結果の管理を支援する採点管理装置を用い、答案に対する採点を支援する採点支援方法において、一の答案に対応付けて、採点者、並びに該採点者による答案に対する点数及び採点根拠を含む採点結果を記録し、一の答案に対応付けて記録されている各採点者の採点結果に含まれる点数を比較して、点数の差が所定範囲内であるか否かを判定し、所定範囲を外れると判定した場合に、点数の差が所定範囲を外れる答案に対する点数及び採点根拠を含む複数の採点結果を前記採点管理装置から出力し、一の答案に対して決定された採点結果を前記採点管理装置にて受け付け、受け付けた採点結果を記録することを特徴とする。
【００１２】
本発明では、複数の採点者の採点結果が一致しない場合に、点数及び採点根拠を含む複数の採点結果を出力することにより、正答が一意に定まらない記述式試験の答案に対する採点結果を評価する場合に、点数だけでなく、採点根拠までも示されるので、採点結果を的確に評価することが可能であり、採点結果を適正なものとすることが可能である。しかも採点結果が一致しない原因を追求することが可能である。
【００１３】
第３発明に係る採点支援方法は、記述式試験の設問の答案に対する採点者毎の採点結果の管理を支援する採点管理装置を用いた採点支援方法において、前記採点管理装置は、集計に係る区分の指定を受け付け、受け付けた区分に基づいて、予め記録されている採点結果を集計し、集計した区分別の採点結果を出力し、区分の指定及び指定された区分に係る採点結果の変更を受け付け、受け付けた変更に基づいて、指定された区分の採点結果の記録を更新することを特徴とする。
【００１４】
本発明では、採点結果を区分毎に集計し、集計した採点結果を区分単位で一括して修正することができるので、採点結果の調整作業の作業性を向上させ、採点結果を管理する作業を支援することが可能である。
【００１５】
第４発明に係る採点支援システムは、記述式試験の採点を支援する採点支援システムにおいて、試験の設問の答案に対する採点者毎の採点結果を受け付ける採点支援装置と、一の答案に対応付けて、前記採点支援装置が受け付けた各採点者の夫々の採点結果を記録する採点結果データベースとを備え、前記採点支援装置は、採点結果データベースから、一の答案に対する一の採点者の採点結果及び他の採点者の採点結果を抽出する手段と、抽出した採点結果を出力する手段と、一の採点者の採点結果の修正を受け付ける手段と、修正した採点結果に基づいて採点結果データベースに記録されている採点結果を更新する手段とを備えることを特徴とする。
【００１６】
本発明では、一の採点者が操作する採点支援装置から、一の採点者の採点結果及び他の採点者の採点結果を出力し、一の採点者の採点結果の修正を可能とすることにより、正答が一意に定まらない記述式試験の設問に対する答案を採点する場合に、一の採点者は、他の採点者の採点結果を参照し、自らの採点結果を修正することができるので、自らが行った主観的な採点結果にとらわれず、様々な視点から答案を再評価することができ、従って採点者が適正な採点を行うことを支援することが可能である。
【００１７】
第５発明に係る採点支援システムは、記述式試験の採点を支援する採点支援システムにおいて、試験の設問の答案に対する点数及び採点根拠を含む採点結果を、採点者毎に受け付ける採点支援装置と、該採点支援装置による採点結果の管理を支援する採点管理装置と、一の答案に対応付けて、採点者、及び前記採点支援装置が受け付けた採点結果を記録する採点結果データベースと、答案に対する決定された採点結果を記録する決定採点結果データベースと、一の答案に対応付けられている複数の採点結果を、採点結果データベースから抽出する手段と、抽出した一の答案に対応付けられている複数の採点結果に含まれる点数を比較して、点数の差が所定範囲内であるか否かを判定する判定手段とを備え、該判定手段により、所定範囲を外れると判定した場合に、前記採点管理装置は、点数の差が所定範囲を外れる答案に対する複数の採点結果を出力する手段と、一の答案に対して決定された採点結果を受け付ける手段と、受け付けた採点結果を決定採点結果データベースに記録する手段とを備えることを特徴とする。
【００１８】
本発明では、複数の採点者の採点結果が一致しない場合に、点数及び採点根拠を含む複数の採点結果を出力することにより、正答が一意に定まらない記述式試験の答案に対する採点結果を評価する場合に、点数だけでなく、採点根拠までも示されるので、採点結果を的確に評価することが可能であり、採点結果を適正なものとすることが可能である。しかも採点結果が一致しない原因を追求することが可能である。
【００１９】
第６発明に係る採点支援システムは、第５発明において、一の採点者に対応付けて、一の採点者による採点結果を他の採点結果と比較した比較結果を記録する採点者分析データベースと、採点者に対応付けて、設問に対する採点の可否を記録する採点可否データベースとを更に備え、前記採点管理装置は、更に、前記判定手段により、所定範囲を外れると判定した場合に、複数の点数の差が所定範囲を外れる採点結果に係る採点者の比較結果を採点者分析データベースから抽出する手段と、抽出した比較結果を出力する手段と、採点者に対応する採点の可否の入力を受け付ける手段と、受け付けた採点の可否を採点可否データベースに記録する手段とを備えることを特徴とする。
【００２０】
本発明では、採点結果が一致しない原因として、採点者の能力不足の可能性の吟味に用いることが可能な比較結果を提供することが可能であり、また採点者の能力不足が採点結果の不一致の原因であると判断した場合に、以後の採点において、能力不足と考えられる採点者による採点を忌避することが可能である。従って採点者を選別することができるので、以後の採点においては優れた採点者による採点を実現し、採点結果を好適なものとすることが可能である。
【００２１】
第７発明に係る採点支援システムは、第６発明において、前記採点者分析データベースは、設問に対する所定の区分毎の比較結果を記録してあり、前記採点可否データベースは、設問の区分に対する採点の可否を記録してあり、前記採点の可否は、設問の区分に対する採点の可否であることを特徴とする。
【００２２】
本発明では、一の採点者の能力の評価を行う場合に、設問の区分毎に他の採点者と比較した結果の集計値を提示することにより、設問の区分毎に採点者の能力の評価を行うことが可能であり、しかも採点者の採点の可否を区分毎に設定することができるので、採点者の能力及び適性を的確に評価し、採点結果を好適なものとすることが可能である。
【００２３】
第８発明に係る採点支援システムは、第６発明又は第７発明において、答案データベースに記録されている一の答案に対応付けて、前記採点支援装置が受け付けた各採点者の最初の採点結果を記録する一次採点結果データベースを更に備え、前記採点者分析データベースは、一次採点結果データベースに記録されている各採点者の最初の採点結果に基づく比較結果を記録してあることを特徴とする。
【００２４】
本発明では、採点者が最初に採点した結果に基づいて採点者を評価することができるので、採点者本来の能力を的確に判断し、以後の採点結果を好適なものとすることが可能である。
【００２５】
第９発明に係る採点支援システムは、第６発明乃至第８発明のいずれかにおいて、設問に対応付けて、採点基準を記録する設問別採点基準データベースと、設問に対応付けて、採点結果の集計結果を記録する採点結果分析データベースとを更に備え、前記採点管理装置は、更に、前記判定手段により、所定範囲を外れると判定した場合に、複数の点数の差が所定範囲を外れる設問に係る採点結果の集計結果を採点結果分析データベースから抽出する手段と、抽出した集計結果を出力する手段と、設問に対応する採点基準に対する変更の入力を受け付ける手段と、受け付けた変更の入力に基づいて、設問別採点基準データベースに記録されている採点基準を更新する手段とを備えることを特徴とする。
【００２６】
本発明では、採点結果が一致しない原因として、採点基準が適正であるか否かの吟味に用いることが可能な修正結果を提示することが可能であり、また採点基準の不適正さが採点結果の不一致の原因であると判断した場合に、採点基準を変更することが可能である。従って採点結果がばらつかない明確な採点基準を制定することが可能であり、採点結果を好適なものとすることが可能である。
【００２７】
第１０発明に係る採点支援システムは、第６発明乃至第９発明のいずれかにおいて、前記採点管理装置は、更に、前記採点結果データベースから採点結果を抽出する手段と、抽出した採点結果を、所定の区分別に集計する手段と、集計した区分別の採点結果を出力する手段と、区分の指定及び区分に係る採点結果に対する変更の入力を受け付ける手段と、受け付けた変更の入力に基づいて、採点結果データベースに記録されている指定された区分の採点結果を更新する手段とを備えることを特徴とする。
【００２８】
本発明では、採点結果を、採点根拠等の区分毎に集計し、集計した採点結果を区分単位で一括して修正することができるので、採点結果の調整作業の作業性を向上させ、採点結果を管理する作業を支援することが可能である。
【００２９】
第１１発明に係る採点支援装置は、記述式試験の設問の答案に対する採点者毎の採点結果を受け付ける採点支援装置において、一の答案に対応付けて、各採点者の夫々の採点結果を記録する採点結果データベースにアクセスする手段と、採点結果データベースから、一の答案に対する一の採点者の採点結果及び他の採点者の採点結果を抽出する手段と、抽出した採点結果を出力する手段と、一の採点者の採点結果の修正を受け付ける手段と、修正した採点結果に基づいて採点結果データベースに記録されている採点結果を更新する手段とを備えることを特徴とする。
【００３０】
本発明では、一の採点者の採点結果及び他の採点者の採点結果を出力し、一の採点者の採点結果の修正を可能とすることにより、正答が一意に定まらない記述式試験の設問に対する答案を採点する場合に、一の採点者は、他の採点者の採点結果を参照し、自らの採点結果を修正することができるので、自らが行った主観的な採点結果にとらわれず、様々な視点から答案を再評価することができるので、採点者が適正な採点を行うことを支援することが可能である。
【００３１】
第１２発明に係る採点管理装置は、記述式試験の設問の答案に対する複数の採点者の採点結果の管理を支援する採点管理装置において、一の答案に対応付けて、採点者、並びに該採点者による答案に対する点数及び採点根拠を含む採点結果を記録する採点結果データベースにアクセスする手段と、答案に対する決定された採点結果を記録する決定採点結果データベースにアクセスする手段と、一の答案に対応付けられている複数の採点結果に含まれる点数の差が所定範囲を外れる場合に、複数の採点結果を採点結果データベースから抽出する手段と、抽出した点数及び採点根拠を含む複数の採点結果を出力する手段と、一の答案に対して決定された採点結果を受け付ける手段と、受け付けた採点結果を決定採点結果データベースに記録する手段とを備えることを特徴とする。
【００３２】
本発明では、複数の採点者の採点結果が一致しない場合に、点数及び採点根拠を含む複数の採点結果を出力することにより、正答が一意に定まらない記述式試験の答案に対する採点結果を評価する場合に、点数だけでなく、採点根拠までも示されるので、採点結果を的確に評価することが可能であり、採点結果を適正なものとすることが可能である。しかも採点結果が一致しない原因を追求することが可能である。
【００３３】
第１３発明に係る採点管理装置は、記述式試験の設問の答案に対する採点者毎の採点結果の管理を支援する採点管理装置において、一の答案に対応付けて、各採点者の点数を含む採点結果を記録する採点結果データベースにアクセスする手段と、採点結果データベースから採点結果を抽出する手段と、集計に係る区分の指定を受け付ける手段と、抽出した採点結果を、受け付けた区分に基づいて集計する手段と、集計した区分別の採点結果を出力する手段と、区分の指定及び指定された区分に係る採点結果に対する変更の入力を受け付ける手段と、受け付けた変更の入力に基づいて、採点結果データベースに記録されている指定された区分の採点結果を更新する手段とを備えることを特徴とする。
【００３４】
本発明では、採点結果を区分毎に集計し、集計した採点結果を区分単位で一括して修正することができるので、採点結果の調整作業の作業性を向上させ、採点結果を管理する作業を支援することが可能である。
【００３５】
第１４発明に係るコンピュータプログラムは、データベースにアクセスする手段を備えるコンピュータに、記述式試験の設問の答案に対する採点者毎の採点結果を受け付けさせるコンピュータプログラムにおいて、コンピュータに、一の答案に対応付けて、前記採点支援装置が受け付けた各採点者の夫々の採点結果を記録する採点結果データベースにアクセスして、一の答案に対する一の採点者の採点結果及び他の採点者の採点結果を抽出させる手順と、抽出した採点結果を出力させる手順と、一の採点者の採点結果の修正を受け付けた場合に、受け付けた採点結果に基づいて採点結果データベースに記録されている採点結果を更新させる手順とを実行させることを特徴とする。
【００３６】
本発明では、コンピュータにて実行することにより、コンピュータが、採点者の採点を支援する採点支援装置として動作する。そして採点支援装置は、一の採点者の採点結果及び他の採点者の採点結果を出力し、一の採点者の採点結果の修正を可能とすることにより、正答が一意に定まらない記述式試験の設問に対する答案を採点する場合に、一の採点者は、他の採点者の採点結果を参照し、自らの採点結果を修正することができるので、自らが行った主観的な採点結果にとらわれず、様々な視点から答案を再評価することができるので、採点者が適正な採点を行うことを支援することが可能である。
【００３７】
第１５発明に係るコンピュータプログラムは、データベースにアクセスする手段を備えるコンピュータに、記述式試験の設問の答案に対する複数の採点者の採点結果の管理を支援させるコンピュータプログラムにおいて、一の答案に対応付けて、採点者、並びに該採点者による答案に対する点数及び採点根拠を含む採点結果を記録する採点結果データベースに記録されている、採点結果に含まれる点数の差が所定範囲を外れる場合に、コンピュータに、一の答案に対応付けられている点数及び採点根拠を含む複数の採点結果を抽出させる手順と、コンピュータに、抽出した点数及び採点根拠を含む複数の採点結果を出力させる手順と、コンピュータに、一の答案に対して決定された採点結果を受け付けさせる手順と、コンピュータに、受け付けた採点結果を、答案に対する決定された採点結果を記録する決定採点結果データベースに記録させる手順とを実行させることを特徴とする。
【００３８】
本発明では、コンピュータにて実行することにより、コンピュータが、採点管理者の採点管理を支援する採点管理装置として動作する。そして採点管理装置は、複数の採点者の採点結果が一致しない場合に、点数及び採点根拠を含む複数の採点結果を出力することにより、正答が一意に定まらない記述式試験の答案に対する採点結果を評価する場合に、点数だけでなく、採点根拠までも示されるので、採点結果を的確に評価することが可能であり、採点結果を適正なものとすることが可能である。しかも採点結果が一致しない原因を追求することが可能である。
【００３９】
第１６発明に係るコンピュータプログラムは、データベースにアクセスする手段を備えるコンピュータに、記述式試験の設問の答案に対する採点者毎の採点結果の管理を支援させるコンピュータプログラムにおいて、コンピュータに、一の答案に対応付けて、各採点者の点数を含む採点結果を記録する採点結果データベースにアクセスして、採点結果を抽出させる手順と、コンピュータに、集計に係る区分の指定を受け付けさせる手順と、コンピュータに、抽出した採点結果を、受け付けた区分に基づいて集計させる手順と、コンピュータに、集計した区分別の採点結果を出力させる手順と、コンピュータに、区分の指定及び指定された区分に係る採点結果に対する変更の入力を受け付けさせる手順と、コンピュータに、受け付けた変更の入力に基づいて、採点結果データベースに記録されている指定された区分の採点結果を更新させる手順とを実行させることを特徴とする。
【００４０】
本発明では、コンピュータにて実行することにより、コンピュータが、採点管理者の採点管理を支援する採点管理装置として動作する。そして採点管理装置は、採点結果を区分毎に集計し、集計した採点結果を区分単位で一括して修正することができるので、採点結果の調整作業の作業性を向上させ、採点結果を管理する作業を支援することが可能である。
【発明の効果】
【００４１】
本発明に係る採点支援方法、採点支援システム、採点支援装置及びコンピュータプログラムは、正答が一意に定まらない記述式試験の設問に対する答案を、複数の採点者により採点するシステムにおける採点者の採点の支援に適用する。そして本発明では、一の答案に対応する一の採点者の採点結果及び他の採点者の採点結果を、例えば容易に比較を行うことができる様に並べて出力し、一の採点者の採点結果の修正を受け付ける。
【００４２】
この構成により、一の採点者は、他の採点者の採点結果を参照し、自らの採点結果を修正することができるので、自らが行った主観的な採点結果にとらわれず、様々な視点から答案を再評価することができるので、採点者が適正な採点を行うことを支援することが可能である等、優れた効果を奏する。
【００４３】
本発明に係る採点支援方法、採点支援システム、採点管理装置及びコンピュータプログラムは、正答が一意に定まらない記述式試験の設問に対する答案を、複数の採点者により採点するシステムにおける採点結果の管理の支援に適用する。そして本発明では、一の答案に対応付けて、採点者、並びに該採点者による答案に対する点数及び採点根拠を含む採点結果を記録し、一の答案に対応付けて記録されている各採点者の採点結果に含まれる点数を比較して、点数の差が所定範囲内であるか否かを判定する。所定範囲を外れると判定した場合、即ち各採点者による採点結果が一致しない場合、採点管理装置では、点数及び採点根拠を含む複数の採点結果を出力し、最終的な決定となる採点結果の入力を受け付けて記録する。
【００４４】
この構成により、複数の採点者の採点結果として、点数だけでなく、採点根拠までも示されるので、採点結果を的確に評価することが可能であり、採点結果を適正なものとすることが可能である等、優れた効果を奏する。しかも採点結果が一致しない原因を追求することが可能である等、優れた効果を奏する。
【００４５】
さらに本発明に係る採点支援システム等では、採点結果が一致しない場合に、採点を行った採点者について、一の採点者による採点結果を他の採点者の採点結果と比較した比較結果を出力する。具体的には、一の採点者の採点結果が、他の採点者の採点結果と一致しなかった件数を集計して出力する。
【００４６】
この構成により、採点結果が一致しない原因として、採点者の能力不足が考えられる場合に、各採点者について、採点結果が他の採点結果とどの程度異なるかを確認することができるので、採点者の能力を評価することが可能となる等、優れた効果を奏する。
【００４７】
しかも採点者に対し、採点の可否を決定し、採点可否データベースに登録することにより、以後の採点において、能力不足と考えられる採点者による採点を忌避することが可能であり、従って採点者を選別することができるので、以後の採点においては優れた採点者による採点を実現し、採点結果を好適なものとすることが可能である等、優れた効果を奏する。
【００４８】
また本発明に係る採点支援システム等では、採点者の能力の評価を行う場合に、設問の区分毎に他の採点者と比較した結果の集計値を提示することにより、設問の区分毎に採点者の能力の評価を行うことが可能であり、しかも採点者の採点の可否を区分毎に設定することができるので、採点者の能力及び適性を的確に評価し、採点結果を好適なものとすることが可能である等、優れた効果を奏する。
【００４９】
さらに本発明に係る採点支援システム等では、採点者が最初に採点した結果に基づく比較結果を出力することにより、採点者が最初に採点した結果に基づいて採点者を評価することができるので、採点者本来の能力を的確に判断し、以後の採点結果を好適なものとすることが可能である等、優れた効果を奏する。
【００５０】
そして本発明に係る採点支援システム等では、採点結果が一致しない場合に、採点結果が一致しない設問についての採点結果を集計して出力する。また出力した内容に基づき採点基準の修正を可能とする。
【００５１】
この構成により、採点結果が一致しない原因として、設問に対して予め設けられている採点基準が不適正であることが考えられる場合に、採点基準が適正であるか否かの吟味に用いることが可能な修正結果を提示することが可能であり、また採点基準の不適正さが採点結果の不一致の原因であると判断した場合に、採点基準を変更することが可能である等、優れた効果を奏する。
【００５２】
本発明に係る採点支援方法、採点支援システム、採点管理装置及びコンピュータプログラムでは、設問等の区分の指定を受け付け、受け付けた区分に基づいて採点結果を集計し、集計した区分別の採点結果を出力し、区分の指定及び指定された区分に係る採点結果の変更を受け付け、受け付けた変更に基づいて、指定された区分の採点結果の記録を更新する。
【００５３】
この構成により、集計した採点結果を区分単位で一括して修正することができるので、採点結果の調整作業の作業性を向上させ、採点結果を管理する作業を支援することが可能である等、優れた効果を奏する。
【発明を実施するための最良の形態】
【００５４】
以下、本発明をその実施の形態を示す図面に基づいて詳述する。図１は、本発明の採点支援システムの構成例を示す概念図である。図１中、１，１，…は、正答が一意に定まらない設問を含む記述式試験の答案に対する採点者毎の採点結果を受け付ける端末装置用コンピュータを用いた採点支援装置であり、採点支援装置１，１，…は、ＬＡＮ(Local Area Network)等の通信網１００に接続されている。通信網１００には、採点支援装置１，１，…を用いて採点する採点者の採点結果を管理する採点管理者による管理を支援する端末装置用コンピュータを用いた採点管理装置２が接続されている。さらに通信網１００には、各種データベースを管理するデータベースサーバコンピュータを用いたデータベース装置３が接続されている。そして採点支援装置１，１，…及び採点管理装置２は、データベース装置３が管理する各種データベースに対してアクセスし、データベースの記録内容に対する読み取り及び書き込みを行うことが可能である。ただし採点者及び採点管理者毎に読み取り及び書き込みを行うことが可能な内容に制限が設けられている。
【００５５】
各採点支援装置１，１，…は、複数の採点者が夫々個別に使用することが望ましいが、１台の採点支援装置１を複数の採点者が使用し、ログイン時に認証処理を行うことにより使い分けても良い。また認証処理により、使用者を特定し、提供する機能に制限を設けることが可能で有れば、採点支援装置１、採点管理装置２及びデータベース装置３を１台の装置にて構成することも可能である。即ち図１に示した構成例は、あくまでも一例を示したに過ぎず、本発明の採点支援システムは、多種多様な形態に展開することが可能である。
【００５６】
図２及び図３は、本発明の採点支援システムにて用いられる各種装置の構成例を示すブロック図である。図２は、主に採点支援装置１及び採点管理装置２を示し、図３は、主にデータベース装置３を示している。採点支援装置１は、装置全体を制御するＣＰＵ(Central Processing Unit) 等の制御手段１１、本発明の採点支援装置用のコンピュータプログラム２０１及びデータ等の各種情報を記録したＣＤ−ＲＯＭ(Compact Disk Read Only Memory) 等の記録媒体３０１から各種情報を読み取るＣＤ−ＲＯＭドライブ等の補助記憶手段１２、補助記憶手段１２により読み取った各種情報を記録するハードディスク等の記録手段１３、情報を一時的に記憶するＲＡＭ(Random Access Memory)等の記憶手段１４、マウス及びキーボード等の入力手段１５、モニタ等の出力手段１６、並びに通信網１００に接続するＬＡＮポート等の通信手段１７を備えている。
【００５７】
そして記録手段１３から本発明の採点支援装置用のコンピュータプログラム２０１及びデータ等の各種情報を読み取り、記憶手段１４に記憶させてコンピュータプログラム２０１に含まれる各種手順を実行することにより、端末装置用コンピュータは、本発明の採点支援装置１０として動作する。
【００５８】
採点管理装置２は、制御手段２１、本発明の採点管理装置用のコンピュータプログラム２０２及びデータ等の各種情報を記録した記録媒体３０２から各種情報を読み取る補助記憶手段２２、記録手段２３、記憶手段２４、入力手段２５、出力手段２６並びに通信手段２７を備えている。
【００５９】
そして記録手段２３から本発明の採点管理装置用のコンピュータプログラム２０２及びデータ等の各種情報を読み取り、記憶手段２４に記憶させてコンピュータプログラム２０２に含まれる各種手順を実行することにより、端末装置用コンピュータは、本発明の採点管理装置２として動作する。
【００６０】
データベース装置３は、制御手段３１、記録手段３２、記憶手段３３及び通信手段３４を備えている。そしてデータベース装置３が備える記録手段３２の記録領域の一部は、設問を記録する設問データベース（設問ＤＢ）３２ａ、採点基準を記録する採点基準データベース（採点基準ＤＢ）３２ｂ、設問毎の採点基準を記録する設問別採点基準データベース（設問別採点基準ＤＢ）３２ｃ、設問に対する答案を記録する答案データベース（答案ＤＢ）３２ｄ、採点者を示す情報を記録する採点者データベース（採点者ＤＢ）３２ｅ、採点者に対応付けて設問に対する採点の可否を記録する採点可否データベース（採点可否ＤＢ）３２ｆ、採点者の採点結果を記録する採点結果データベース（採点結果ＤＢ）３２ｇ、採点者の最初の採点結果を記録する一次採点結果データベース（一次採点結果ＤＢ）３２ｈ、採点管理者による最終的に決定された採点結果を記録する決定採点結果データベース（決定採点結果ＤＢ）３２ｉ、採点者の採点結果の分析に用いられる採点者分析データベース（採点者分析ＤＢ）３２ｊ、採点基準の分析に用いられる採点結果分析データベース（採点結果分析ＤＢ）３２ｋ、及び採点結果を区分毎に集計した区分別採点結果データベース（区分別採点結果ＤＢ）３２ｌとして用いられる。
【００６１】
図４は、本発明の採点支援システムにて用いられる設問データベース３２ａの記録内容の例を概念的に示す説明図である。設問データベース３２ａは、各試験に含まれる設問を記録したデータベースであり、試験ＩＤ及び設問ＩＤが対応付けて記録されている。さらに試験ＩＤには、年、級及び回数の項目が設定されている。例えば２００４年度の２級試験の１回目という様に試験が特定される。設問ＩＤは、当該試験における第何問目かを特定するＩＤであり、設問内容を示すテキストデータ及び／又はイメージデータが対応付けられる。
【００６２】
図５は、本発明の採点支援システムにて用いられる採点基準データベース３２ｂの記録内容の例を概念的に示す説明図である。採点基準データベース３２ｂは、採点基準のマスタとなる内容を記録したデータベースであり、級、設問形態、分類、採点項目、採点基準及び基準点の項目が対応付けて記録されている。級と示された項目には、設問の級に対応し、「準１級」、「２級」等のデータが記録される。設問形態と示された項目には、「論説文の作成」等の設問の形態を示すデータが記録される。分類と示された項目には、採点の形式を示す「加点」又は「減点」と示されたデータが記録される。採点項目と示された項目には、「読解力」、「構成力」、「論理性」、「意見や材料の独自性」、「要旨の明確さ」等の答案に対する採点の項目を示すデータが記録される。採点基準と示された項目は、採点項目に対する採点の基準を示すデータが記録される。例えば２級の「論説文の作成」に係る設問に対しては、「読解力」、「構成力」等の採点項目があり、採点項目である「読解力」に対し、「趣旨・内容を正しくとらえて、２級として優れた文章を書いている」、「趣旨・内容を正しくとらえて、２級として認められる文章を書いている」、「趣旨・内容を正しくとらえているが、文章として物足りないものを書いている」等の採点基準が設定されている。基準点として示された項目には、設問の配点に対する率を百分率で示した数値がデータとして記録される。例えば２級の論説文の作成について満点が３０点の設問に対する答案が、「読解力」については、「趣旨・内容を正しく捉えているが、文章として物足りないものを書いている」と採点される場合、３０点の３３％である１０点（９．９点を切り上げ）が与えられる。
【００６３】
図６は、本発明の採点支援システムにて用いられる設問別採点基準データベース３２ｃの記録内容の例を概念的に示す説明図である。設問別採点基準データベース３２ｃは、設問データベース３２ａ及び採点基準データベース３２ｂに基づいて生成されるデータベースであり、試験ＩＤ、設問ＩＤ、設問形態、採点項目、採点基準及び基準点の項目が対応付けて記録されている。なお基準点の項目には百分率ではなく絶対的な点数を示すデータが記録されている。例えば「２００４」年「２」級の「１」回目の試験における「２」番目の設問は、「論説文の作成」についての設問であり、「読解力」、「構成力」、「論理性」等の採点基準で採点される。更に「読解力」については、「趣旨・内容を正しくとらえて、２級として優れた文章を書いている」、「趣旨・内容を正しくとらえて、２級として認められる文章を書いている」等の採点基準が設けられており、夫々「１５」点、「１０」点等の点数が設定されている。なお設問別採点基準データベース３２ｃには、採点基準と基準点とが対応付けて記録されているが、基準点は、採点基準に対する目安として設定されている点数であり、採点を行う採点者及び採点管理者の裁量により、採点時に、採点基準に対応している基準点と異なる点数を付けることも可能である。
【００６４】
図７は、本発明の採点支援システムにて用いられる答案データベース３２ｄの記録内容の例を概念的に示す説明図である。答案データベース３２ｄは、受験者の設問に対する答案を設問別に記録するデータベースであり、設問を特定する試験ＩＤ及び設問ＩＤ、受験者を特定する受験者ＩＤ、及び答案をイメージスキャナ等の読取装置にて読み取り作成したイメージデータである答案データが対応付けて記録されている。答案データベース３２ｄには、答案データとして、イメージデータを直接データベースに記録しても良いが、答案データの記録位置及びファイル名を記録し、イメージデータは別途記録する様にしても良い。
【００６５】
図８は、本発明の採点支援システムにて用いられる採点者データベース３２ｅの記録内容を概念的に示す説明図である。採点者データベース３２ｅは、採点者を示す情報を記録するデータベースであり、採点者を特定する採点者ＩＤ及び採点者の氏名が対応付けて記録されている。
【００６６】
図９は、本発明の採点支援システムにて用いられる採点可否データベース３２ｆの記録内容を概念的に示す説明図である。採点可否データベース３２ｆは、採点者の採点の可否を記録するデータベースであり、採点者ＩＤ、級、設問形態、採点項目及び採点禁止フラグの項目が対応付けて記録されている。図９に示す例では、採点者ＩＤが１００１である採点者は、「１級」及び「論説文の作成」にて区分される設問の答案の採点項目の一つである「読解力」に対して、採点禁止フラグがオンとなっているため、採点することができない様に設定されている。
【００６７】
図１０は、本発明の採点支援システムにて用いられる採点結果データベース３２ｇの記録内容を概念的に示す説明図である。採点結果データベース３２ｇは、採点者による答案に対する採点の結果を記録するデータベースであり、試験ＩＤ、設問ＩＤ、受験者ＩＤ、設問形態、採点項目、採点者ＩＤ、採点基準、点数及び採点画像の項目が対応付けて記録されている。採点結果データベース３２ｇは、試験ＩＤ及び設問ＩＤにより特定される設問、及び受験者ＩＤにより特定される受験者の答案の採点項目に対して、採点者ＩＤにより特定される採点者が採点した結果を記録するデータベースである。採点者が採点した結果は、採点基準、点数、及び採点者が記したイメージデータである採点画像として示される。なお本発明の採点支援システムでは、後述する様に一の答案に対して一の採点者が推敲を重ね何度も採点結果を更新することが可能としているため、採点結果データベース３２ｇに採点結果として記録されている採点基準、点数及び採点画像のデータは更新することが可能なデータである。
【００６８】
本発明の採点支援システムにおける採点とは、答案に対して、採点基準を適用し、その適用の根拠、即ち採点根拠を示し、その結果として点数を付与することをいう。そして採点に適用された採点基準、並びに採点根拠を示す採点画像及び点数を含む採点結果が採点結果データベース３２ｇに記録される。なお採点画像だけでなく、採点基準も、採点結果の一つである採点根拠と見なすことができる。
【００６９】
図１１は、本発明の採点支援システムにて用いられる一次採点結果データベース３２ｈの記録内容を概念的に示す説明図である。一次採点結果データベース３２ｈは、採点者の最初の採点結果を記録するデータベースであり、試験ＩＤ、設問ＩＤ、受験者ＩＤ、設問形態、採点項目、採点者ＩＤ、採点基準、点数及び採点画像の項目が対応付けて記録されている。図１０及び図１１を比較すると明らかな様に、一次採点結果データベース３２ｈの記録内容は、実質的に採点結果データベース３２ｇと同様である。ただし一次採点結果データベース３２ｈは、採点者の最初の採点結果を記録するデータベースであるため、一度記録された採点基準、並びに点数及び採点画像のデータを更新することはできない。
【００７０】
図１２は、本発明の採点支援システムにて用いられる決定採点結果データベース３２ｉの記録内容を概念的に示す説明図である。決定採点結果データベース３２ｉは、採点管理者による最終的に決定された採点結果を示すデータベースであり、試験ＩＤ、設問ＩＤ、受験者ＩＤ、設問形態、採点項目、採点管理者を示す採点管理者ＩＤ、採点基準及び点数の項目が対応付けて記録されている。なお採点管理者ＩＤは、採点者ＩＤと実質的に同様であるが、図１２に示す例では、便宜上、「９９９９」を採点管理者ＩＤとして運用している。ただし採点管理者が複数である場合、「９９９９」を採点管理者ＩＤとして固定するのではなく、９０００番台を採点管理者ＩＤとする等の運用も可能である。決定採点結果データベース３２ｉに記録されている採点基準及び点数は、採点管理者が、採点結果データベース３２ｇに記録された各採点者の採点結果を参照して最終的に決定した結果を記録したものである。
【００７１】
図１３は、本発明の採点支援システムにて用いられる採点者分析データベース３２ｊの記録内容を概念的に示す説明図である。採点者分析データベース３２ｊには、採点者ＩＤに対応付けて、設問形態、採点項目及び件数の項目が記録されている。採点者分析データベース３２ｊは、設問形態及び採点項目により区分される設問の項目について、採点者ＩＤにより特定される採点者による採点結果が、採点管理者又は他の採点者の採点結果と異なると判定された件数を記録するデータベースであり、設問の区分毎の採点の比較結果として、他の採点者と異なると判定された採点結果の件数を集計して記録することにより、採点者の評価の支援に用いることを目的としたデータベースである。
【００７２】
図１４は、本発明の採点支援システムにて用いられる採点結果分析データベース３２ｋの記録内容を概念的に示す説明図である。採点結果分析データベース３２ｋには、試験ＩＤ、設問ＩＤ、設問形態、採点項目、決定採点基準、採点基準及び件数の項目が対応付けて記録されている。採点結果分析データベース３２ｋは、試験ＩＤ及び設問ＩＤ並びに設問形態にて特定される設問について、採点項目にて特定される区分毎に、適用された採点基準が、採点管理者が決定した採点基準と異なると判定された件数を集計して記録することにより、採点基準の評価の支援に用いられることを目的としたデータベースである。なお決定採点基準とは、採点管理者が最終的に決定した採点基準を示している。
【００７３】
図１５は、本発明の採点支援システムにて用いられる区分別採点結果データベース３２ｌの記録内容を概念的に示す説明図である。区分別採点結果データベース３２ｌには、試験ＩＤ、設問ＩＤ、設問形態、採点項目、採点基準、件数及び点数の項目が対応付けて記録されている。区分別採点結果データベース３２ｌは、試験ＩＤ、設問ＩＤ、設問形態及び採点項目別の採点結果を、区分、ここでは採点基準別に集計した件数に対応付け、更に点数を対応付けて記録したデータベースである。
【００７４】
次に本発明の採点支援システムが備える各種装置の処理について説明する。図１６は、本発明の採点支援システムにて用いられる採点管理装置２の設問別採点基準設定処理を示すフローチャートである。採点管理装置２を操作する採点管理者は、採点者に採点させる前処理として、データベース装置３にログインし、設問別採点基準データベース３２ｃを生成させるべく、試験ＩＤ及び設問ＩＤの指定、並びに採点項目及び採点基準の指定等の操作を行う。
【００７５】
操作を受け付けた採点管理装置２は、記憶手段２４に記憶させたコンピュータプログラム２０２を実行する制御手段２１の制御により、設問データベース３２ａ及び採点基準データベース３２ｂにアクセスして、記録されている情報を読み取り（Ｓ１０１）、読み取った情報に基づいてデータベース装置３に設問別採点基準データベース３２ｃを生成する（Ｓ１０２）。なお設問データベース３２ａから読み取る情報とは、指定された試験ＩＤ及び設問ＩＤであり、採点基準データベース３２ｂから読み取る情報とは、指定された級、設問形態、分類、採点項目、採点基準及び基準点である。なおステップＳ１０２にて生成された設問別採点基準データベース３２ｃは、生成後、設問の個々の内容に応じて適宜修正することも可能であり、また設問データベース３２ａ及び採点基準データベース３２ｂから生成するのではなく、採点管理者が操作して直接作成する様にしても良い。このようにして設問別採点基準設定処理が行われる。
【００７６】
図１７は、本発明の採点支援システムにて用いられるデータベース装置３の答案配布処理を示すフローチャートである。データベース装置３では、例えば採点管理装置２から受け付ける答案配布の指示に基づいて、採点者に採点させるべき答案を配布する答案配布処理を実行する。データベース装置３は、制御手段３１の制御により、採点者データベース３２ｅ及び採点可否データベース３２ｆの記録内容に基づいて、各採点者に対して配布、即ち答案を採点させる区分を判定する（Ｓ２０１）。ここでいう区分とは、級、設問形態及び採点項目にて決定される設問の項目についての区分である。
【００７７】
そしてデータベース装置３では、制御手段３１の制御により、ステップＳ２０１にて判定した区分に基づいて、設問別採点基準データベース３２ｃから、試験ＩＤ及び設問ＩＤ、並びに採点項目、採点基準及び基準点を抽出し（Ｓ２０２）、抽出した試験ＩＤ及び設問ＩＤにより特定される設問に対する答案データを、答案データベース３２ｄから抽出し（Ｓ２０３）、抽出した採点項目、採点基準及び基準点、並びに答案データを採点者に配布する（Ｓ２０４）。ステップＳ２０１〜Ｓ２０４の処理は、ステップＳ２０１にて区分を判定した採点者毎に行われる。即ち複数の採点者の夫々に対し、採点させる設問の区分の判定、判定した区分に基づく試験ＩＤ、採点項目等の各種情報の抽出、答案の抽出、及び抽出した各種情報の配布を行う。またステップＳ２０４の配布とは、各採点者が操作する採点支援装置１，１，…へ夫々送信する様にしても良いが、各採点者に対応付けて答案等の各種情報へのアクセスを許可する様にしても良い。このようにして答案配布処理が行われる。
【００７８】
図１８は、本発明の採点支援システムにて用いられる採点支援装置１の一次採点処理を示すフローチャートである。採点支援装置１を操作する採点者は、データベース装置３にログインし、受験者の答案に対する採点を行うべく所定の操作を行う。操作を受け付けた採点支援装置１は、記憶手段１４に記憶させたコンピュータプログラム２０１を実行する制御手段１１の制御により、配布された採点項目、採点基準及び基準点、並びに答案データを読み取り（Ｓ３０１）、読み取った各種情報に基づいて、採点用の画面を出力手段１６から出力する（Ｓ３０２）。なお図１７を用いて説明した答案配布処理における各種情報の配布が、採点支援装置１への送信である場合、ステップＳ３０１における読み取りとは、受信した情報の読み取りであり、各種情報の配布がアクセスの許可である場合、ステップＳ３０１における読み取りとは、データベース装置３へアクセスした上でのデータベース装置３が備える各種データベースに記録されている各種情報の読み取りである。
【００７９】
図１９は、本発明の採点支援システムが備える採点支援装置１から出力された画面を示す説明図である。図１９は、一次採点処理のステップＳ３０２にて、出力手段１６から出力される採点用の画面であり、画面の左側には、答案データに基づく答案の画像が示されている。なお答案中に示された楕円及び二重線は、採点者が入力手段２５を操作した入力に基づく書き込みであり、採点者が採点の根拠とした箇所を明確にするために行ったものである。画面の右側には、当該答案の設問に対応する採点項目である読解力、構成力及び論理性と示されたプルダウンメニューを示す画像が表示されている。また前述した様に採点項目に対して複数の採点基準が設定され、設定された採点基準の内容に対して点数が対応付けられており、図１９に示す画面では、採点項目に対して採点基準及び点数が選択された状態を示している。例えば採点者は、採点項目である「読解力」についての採点として、「趣旨・内容を正しくとらえて、２級として優れた文章を書いている」という採点基準を適用した採点を行い、当該採点基準に対応する１５点を付与している。なお画面の下側の「前の問題」及び「次の問題」と示した画像を指示する入力を行うことにより、他の設問に対する答案が出力され、採点作業を行うことができる。また「登録」と示した画像を指示する入力行うことにより、採点結果の登録処理が行われる。
【００８０】
図２０は、本発明の採点支援システムが備える採点支援装置１から出力された画面内の画像を示す説明図である。図２０（ａ）は、図１９に示した画面から採点項目に対する採点基準を選択する場合に表示される画像を示しており、採点項目の右側に示された黒い三角形の画像を指示することにより、プルダウンメニューとして採点基準及び点数の一覧が表示される。採点者は、表示されたプルダウンメニューの中から適当な採点基準及び点数を指示することにより、採点基準及び点数の選択操作を行う。図２０（ｂ）は、予め設定されている採点基準及び点数以外の評価をする場合に用いられる画像であり、採点者が採点支援装置１に対して所定の操作を行うことにより、採点基準の下方に空欄が表示され、独自の採点基準をコメントとして入力することが可能である。また採点者が採点支援装置１に対して所定の操作を行うことにより、採点項目の右方に空欄が表示され、独自の点数を入力することが可能である。
【００８１】
図１９及び図２０を用いて示した採点用の画面が表示されるマンマシンインターフェースにより、採点者は答案に対する採点を行うことができ、所定の登録操作を行うことにより、選択又は入力された採点基準と、選択又は入力された点数と、答案に書き込まれた内容をイメージデータとして示す採点画像とが登録される。
【００８２】
図１８のフローチャートに戻り、採点支援装置１は、制御手段１１の制御により、入力手段１５から、適用された採点基準、並びに点数及び採点根拠を含む採点結果の入力を受け付け（Ｓ３０３）、採点基準並びに点数及び採点根拠を含む採点結果を採点結果データベース３２ｇ及び一次採点結果データベース３２ｈに記録する（Ｓ３０４）。ステップＳ３０４では、採点の対象となった答案に関する試験ＩＤ、設問ＩＤ及び受験者ＩＤ、並びに採点者に係る採点者ＩＤに対応付けて、採点基準及び採点結果が記録される。このようにして一次採点処理が行われる。
【００８３】
図２１は、本発明の採点支援システムにて用いられる採点支援装置１の採点結果修正処理を示すフローチャートである。本発明の採点支援システムでは、採点者が採点支援装置１に対して答案及び採点結果を指定する所定の操作を行うことにより、データベース装置３にログインし、一度行った採点結果を修正することができる。操作を受け付けた採点支援装置１は、記憶手段１４に記憶させたコンピュータプログラム２０１を実行する制御手段１１の制御により、指定された一の答案データに対応付けて記録されている当該採点者の採点基準及び採点結果並びに他の採点者の採点基準及び採点結果を採点結果データベース３２ｇから抽出し（Ｓ４０１）、抽出した採点基準及び採点結果に基づく画面を出力手段１６から出力する（Ｓ４０２）。ステップＳ４０１の当該採点者とは、採点支援装置１を操作している採点者であり、ステップＳ４０１では、操作を行っている一の採点者の採点結果だけでなく、指定した答案を示す試験ＩＤ、設問ＩＤ及び受験者ＩＤに対応付けて既に記録されている他の採点者の採点結果をも抽出する。なお他の採点者は、一であっても複数であっても良く、また採点者を指定することも可能である。
【００８４】
図２２は、本発明の採点支援システムが備える採点支援装置１から出力された画面を示す説明図である。図２２は、採点結果修正処理のステップＳ４０２にて、出力手段１６から出力される採点結果修正用の画面であり、画面の左側には、指定された答案に対して採点支援装置１を操作している採点者が、読解力について採点した採点基準、並びに点数及び採点根拠を含む採点結果を示す画像が出力されている。そして画面右側には、他の採点者が採点した点数及び採点根拠を含む採点結果を示す画像が並べて出力されている。また採点画像の下方には、採点根拠である採点基準及び点数を修正するためのプルダウンメニューが示されている。採点者は、自己の採点基準及び採点結果と他の採点者の採点基準及び採点結果とを比較し、自己の採点結果を修正する場合に、プルダウンメニューからの採点基準及び点数の選択、又は入力を行い、画面下側の「登録」と示された画像を指示することにより、修正操作を行うことができる。また画面下側の「戻る」及び「次へ」と示した画像を指示する入力を行うことにより、他の設問に対する答案及び採点結果が出力される。なおこのとき答案に対して新たな書き込みを行い採点画像を修正することも可能である。
【００８５】
図２１のフローチャートに戻り、採点支援装置１は、記憶手段１４に記憶させたコンピュータプログラム２０１を実行する制御手段１１の制御により、入力手段１５から、操作を行っている採点者の採点基準、並びに点数及び採点根拠を含む採点結果の修正の入力を受け付け（Ｓ４０３）、修正した採点基準、並びに点数及び採点根拠を含む採点結果に基づいて採点結果データベース３２ｇに記録されている採点基準及び採点結果を更新する（Ｓ４０４）。ステップＳ４０４の更新は、採点結果データベース３２ｇに対して行われるが、一次採点結果データベース３２ｈに対しては行われない。また採点結果修正処理は、例えば予め設定されている期間内であれば２回以上修正することも可能である。このようにして採点結果修正処理が行われる。
【００８６】
図２３は、本発明の採点支援システムにて用いられる採点管理装置２の採点結果決定処理を示すフローチャートである。本発明の採点支援システムでは、一の答案に対して複数の採点者が採点するため、採点結果が一致しない状況が生じる。そこで採点管理者が採点管理装置２を操作して、複数の採点者が採点した採点結果に基づき採点結果の決定を行う。操作を受け付けた採点管理装置２は、記憶手段２４に記憶させたコンピュータプログラム２０２を実行する制御手段２１の制御により、採点結果の決定の対象となる一の答案に対応付けられている複数の採点基準及び採点結果を採点結果データベース３２ｇから抽出し（Ｓ５０１）、抽出した一の答案に対応付けられている複数の採点結果に含まれる点数を比較し（Ｓ５０２）、比較の結果である点数の差が所定範囲内であるか否かを判定する（Ｓ５０３）。ステップＳ５０１の抽出とは、対象となる答案を特定する試験ＩＤ、設問ＩＤ及び受験者ＩＤに対応付けられた採点基準、並びに点数及び採点根拠である採点画像を含む採点結果を抽出する処理である。またステップＳ５０２の比較は、複数の採点者が行った採点結果に含まれる点数の最大値及び最小値の差を求めることにより行われる。なお極端に高い点数又は低い点数が存在する場合、異常値として除く様にしても良い。
【００８７】
ステップＳ５０３において、点数の差が所定範囲内であると判定した場合（Ｓ５０３：ＹＥＳ）、採点管理装置２は、制御手段２１の制御により、採点結果である複数の点数の平均値を算出し（Ｓ５０４）、複数の採点基準の中から最多の採点基準を判定し（Ｓ５０５）、算出した点数の平均値及び判定した最多の採点基準を、最終的に決定した採点結果及び採点基準として決定採点結果データベース３２ｉに記録し（Ｓ５０６）、採点結果決定処理を終了する。ステップＳ５０６において、採点結果及び採点基準は、答案を特定する試験ＩＤ、設問ＩＤ及び受験者ＩＤ、設問形態及び採点項目、並びに採点管理者ＩＤに対応付けて記録される。
【００８８】
ステップＳ５０３において、点数の差が所定範囲を外れると判定した場合（Ｓ５０３：ＮＯ）、採点管理装置２は、制御手段２１の制御により、ステップＳ５０１にて抽出した採点結果及び採点基準に基づく画面を出力手段２６から出力する（Ｓ５０７）。なお点数の差が所定範囲を外れると判定した場合に、無条件に採点結果及び採点基準に基づく画面を出力するのではなく、所定範囲を外れることを示した情報を出力した上で、採点管理者が出力させるべき採点結果及び採点基準を指定し、指定された採点結果及び採点基準に基づく画面を抽出して出力する様にしても良い。
【００８９】
図２４は、本発明の採点支援システムが備える採点管理装置２から出力された画面を示す説明図である。図２４は、採点結果決定処理のステップＳ５０７にて、出力手段２６から出力される採点結果及び採点基準の比較用の画面であり、複数、ここでは２の採点結果及び採点基準に基づく画像が並べて出力されている。なお３以上の採点結果及び採点基準に基づく画像を出力する様にしても良い。図２４に示す例では、採点項目が読解力である採点結果及び採点基準が示されており、採点結果に含まれる採点根拠として、答案に対する書き込みを示すイメージデータである採点画像に基づく画像が出力されており、更に採点結果に含まれる点数が出力されている。そして並べて出力された採点結果の下方に、採点管理者が決定した採点基準及び点数を選択するためのプルダウンメニューが示されている。採点管理者は、出力された複数の採点結果及び採点基準を比較した上で、採点結果及び採点基準を決定し、プルダウンメニューからの点数及び採点基準の選択、又は入力を行い、画面下側の「登録」と示された画像を指示することにより、採点結果の決定操作を行うことができる。また画面下側の「戻る」及び「次へ」と示した画像を指示する入力を行うことにより、他の設問に対する答案及び採点結果が出力される。
【００９０】
図２３のフローチャートに戻り、採点管理装置２は、記憶手段２４に記憶させたコンピュータプログラム２０２を実行する制御手段２１の制御により、入力手段２５から、当該答案に対して決定された採点結果及び採点基準の入力を受け付け（Ｓ５０８）、受け付けた採点結果及び採点基準を決定採点結果データベース３２ｉに記録する（Ｓ５０９）。なおステップＳ５０１〜Ｓ５０９に示した処理は、対象となる全ての答案に対して実行される。このようにして採点結果決定処理が行われる。
【００９１】
図２５は、本発明の採点支援システムにて用いられる採点管理装置２の採点者別採点結果集計処理を示すフローチャートである。本発明の採点支援システムでは、採点結果決定処理において、複数の採点者の採点結果である点数の差が所定範囲を超える場合、即ち採点結果が一致しない場合に、一致しない原因を追及すべく採点者別に採点結果を集計する処理を行う。採点管理装置２は、記憶手段２４に記憶させたコンピュータプログラム２０２を実行する制御手段２１の制御により、一次採点結果データベース３２ｈにアクセスして、採点結果が一致しない答案に対する各採点者の最初の採点結果を抽出し（Ｓ６０１）、決定採点結果データベース３２ｉにアクセスして、採点結果が一致しない答案に対して採点管理者が決定した採点結果を抽出する（Ｓ６０２）。ステップＳ６０１及びＳ６０２の抽出とは、採点結果決定処理において採点結果が一致しないと判定された答案を特定する試験ＩＤ、設問ＩＤ及び受験者ＩＤに基づいて、対応付けられている採点結果の点数を抽出する処理である。なおステップＳ６０１及びＳ６０２の抽出は、採点結果が一致しない全ての答案に対して行われる。またステップＳ６０１では、採点結果データベース３２ｇではなく、一次採点結果データベース３２ｈに記録されている採点結果を抽出する。他の採点者の採点結果を参照して修正することが可能な採点結果ではなく、独自に判断した採点結果に基づいて採点者の能力を判定するためである。
【００９２】
採点管理装置２は、制御手段２１の制御により、一次採点結果データベース３２ｈから抽出した採点者毎の採点結果を、決定採点結果データベース３２ｉから抽出した採点管理者の採点結果と比較し（Ｓ６０３）、比較した結果を採点者毎に集計し（Ｓ６０４）、集計した結果を採点者分析データベース３２ｊに記録する（Ｓ６０５）。ステップＳ６０３の比較とは、採点者の採点結果である点数と、採点管理者の採点結果である点数とを比較し、一致するか否かを判定する処理である。なお採点者及び採点管理者の点数は、完全に一致していなくとも、その差が所定の範囲内で有れば一致していると見なされる。ステップＳ６０４の集計とは、各採点者について、採点結果の抽出の対象となった全ての答案に対する採点結果の中で、採点管理者の採点結果と一致しないと判定された採点結果の件数を、採点項目別に集計する処理である。
【００９３】
なおステップＳ６０３では、採点管理者の採点結果と比較する形態を示しているが、採点管理者が指定した規範となる採点者の採点結果と比較する形態であっても良い。また採点者別採点結果集計処理は、採点者の評価が目的であるので、採点結果である点数の差が所定の範囲を超えるか否かに関わらず、決定採点結果データベース３２ｉに記録されている採点管理者が決定した採点結果と、一次採点結果データベース３２ｈに記録されている採点者の採点結果とが一致しない全ての採点結果について集計する様にしても良い。この様にステップＳ６０３〜Ｓ６０５では、一の採点者による採点結果を他の採点者（採点管理者を含む）の採点結果と比較した比較結果を、採点者別及び採点項目にて示される区分別に集計し、採点者分析データベース３２ｊに記録するのである。このようにして採点者別採点結果集計処理が行われる。
【００９４】
図２６は、本発明の採点支援システムにて用いられる採点管理装置２の採点者評価処理を示すフローチャートである。本発明の採点支援システムでは、採点者別採点結果集計処理により集計した採点者毎の採点結果に基づいて、採点者の能力及び適正の判断の支援を行う。採点管理者は、採点能力の分析の対象となる採点者を示す情報である採点者ＩＤ又は氏名を採点管理装置２に入力する操作を行う。入力手段２５から採点者を示す情報の入力を受け付けた採点管理装置２は、記憶手段２４に記憶させたコンピュータプログラム２０２を実行する制御手段２１の制御により、受け付けた採点者を示す情報に基づいて、採点者分析データベース３２ｊから、採点結果の比較結果を集計した集計結果を抽出し（Ｓ７０１）、抽出した集計結果に基づく画面を出力手段２６から出力する（Ｓ７０２）。
【００９５】
図２７は、本発明の採点支援システムが備える採点管理装置２から出力された画面を示す説明図である。図２７は、採点者評価処理のステップＳ７０２にて、出力手段２６から出力される画面であり、採点者ＩＤが「１００１」である採点者「特許花子」の採点結果の比較結果について集計した集計結果を示している。図２７に示す様に採点者「特許花子」の採点結果を比較した結果は、設問形態及び採点項目別に集計されている。また夫々の採点項目に対応付けて採点禁止フラグについての入力欄が設けられている。例えば採点者「特許花子」が、設問形態「論説文の作成」の採点項目「読解力」の設問に対する答案についての採点結果が、採点管理者の採点結果と一致しなかった件数は、「１０」件であり、採点項目「構成力」の設問に対する答案についての採点結果が、採点管理者の採点結果と一致しなかった件数は、「５」件である。そして採点管理者は、図２７に示した画面に基づいて、採点者「特許花子」は、設問形態「論説文の作成」の採点項目「読解力」の採点には適していないと判断し、採点項目「読解力」に対応付けて設けられている採点禁止フラグとして示された欄に「ＯＮ」を入力する操作を行う。なお図２７に示した集計結果に基づく画面の出力に際し、採点者ＩＤ及び氏名の対応付けは、採点者データベース３２ｅの記録内容に基づき行われる。
【００９６】
図２６のフローチャートに戻り、採点管理装置２は、制御手段２１の制御により、入力手段２５から、採点禁止フラグについての入力結果を受け付け（Ｓ７０３）、受け付けた採点禁止フラグについての入力結果に基づいて、採点可否データベース３２ｆの記録内容を更新する（Ｓ７０４）。ステップＳ７０４の更新処理により、以降の採点において、採点者「特許花子」は、設問形態「論説文の作成」の採点項目「読解力」の区分についての採点者から除外される。このようにして採点者評価処理が行われる。
【００９７】
図２８は、本発明の採点支援システムが備える採点管理装置２の採点区分別採点結果集計処理を示すフローチャートである。本発明の採点支援システムでは、採点結果決定処理において、複数の採点者の採点結果である点数の差が所定範囲を超える場合、即ち採点結果が一致しない場合に、一致しない原因を追及すべく採点項目等の区分別に採点結果を集計する処理を行う。採点管理装置２は、記憶手段２４に記憶させたコンピュータプログラム２０２を実行する制御手段２１の制御により、一次採点結果データベース３２ｈにアクセスして、採点結果が一致しない答案に対する各採点者の最初の採点結果を抽出し（Ｓ８０１）、決定採点結果データベース３２ｉにアクセスして、採点結果が一致しない答案に対して採点管理者が決定した採点結果を抽出する（Ｓ８０２）。ステップＳ８０１及びＳ８０２の抽出とは、採点結果決定処理において採点結果が一致しないと判定された答案を特定する試験ＩＤ、設問ＩＤ及び受験者ＩＤに基づいて、対応付けられている採点結果の採点根拠、ここでは採点基準を抽出する処理である。なおステップＳ８０１及びＳ８０２の抽出は、採点結果が一致しない全ての答案に対して行われる。またステップＳ８０１では、採点結果データベース３２ｇではなく、一次採点結果データベース３２ｈに記録されている採点結果を抽出する。
【００９８】
採点管理装置２は、制御手段２１の制御により、一次採点結果データベース３２ｈから抽出した採点結果を、決定採点結果データベース３２ｉから抽出した採点管理者の採点結果と比較し（Ｓ８０３）、比較した結果を区分別に集計し（Ｓ８０４）、集計した結果を採点結果分析データベース３２ｋに記録する（Ｓ８０５）。ステップＳ８０３の比較とは、採点者の採点結果に含まれる採点根拠である採点基準と、採点管理者の採点結果に含まれる採点根拠である採点基準とを比較し、一致するか否かを判定する処理である。ステップＳ８０４の集計とは、採点管理者の採点基準と異なる採点基準が適用された採点結果の件数を、設問の採点項目別に集計する処理である。なおステップＳ８０３では、採点管理者の採点結果と比較する形態を示しているが、採点管理者が指定した規範となる採点者の採点結果と比較する形態であっても良い。またステップＳ８０４では、採点項目別に集計したが、採点項目以外の区分に基づいて集計する様にしても良い。このようにして採点区分別採点結果集計処理が行われる。
【００９９】
図２９は、本発明の採点支援システムにて用いられる採点管理装置２の採点基準集計結果出力処理を示すフローチャートである。本発明の採点支援システムでは、採点区分別採点結果集計処理により集計した設問の採点項目毎の採点基準の件数に基づいて、採点基準の妥当性の判断の支援を行う。採点管理者は、採点基準の分析の対象となる設問を示す試験ＩＤ及び設問ＩＤを採点管理装置２に入力する操作を行う。入力手段２５から試験ＩＤ及び設問ＩＤの入力を受け付けた採点管理装置２は、記憶手段２４に記憶させたコンピュータプログラム２０２を実行する制御手段２１の制御により、受け付けた試験ＩＤ及び設問ＩＤに基づいて、採点結果分析データベース３２ｋから設問毎の採点結果の採点基準を集計した集計結果を抽出し（Ｓ９０１）、抽出した集計結果に基づく画面を出力手段２６から出力する（Ｓ９０２）。このようにして採点基準集計結果出力処理が行われる。
【０１００】
図３０は、本発明の採点支援システムが備える採点管理装置２から出力された画面を示す説明図である。図３０は、採点基準集計結果出力処理のステップＳ９０２にて、出力手段２６から出力される画面であり、試験ＩＤが「２００４年」、「２級」及び「第１回」、設問ＩＤが「１」、そして設問形態が「論説文の作成」である設問の採点項目「読解力」について集計した結果等の集計結果が示されている。図３０に示す様に当該設問の「読解力」の答案に対し、採点管理者が「趣旨・内容を正しくとらえて２級として認められる文章を書いている」という採点基準を決定したにも関わらず、採点者が「適切で独自性を感じさせる情報・知識・経験を使って論旨を進めている」という採点基準を適用した件数が「１８９」件に達している。例えば図３０に示す様な集計結果を確認することにより、採点管理者は、「読解力」に係る採点基準が不適正であることが、採点結果が不一致となる原因であり、採点基準の見直しを要すると判断することができる。
【０１０１】
図３１は、本発明の採点支援システムにて用いられる採点管理装置２の採点基準修正処理を示すフローチャートである。採点基準集計結果出力処理により出力された集計結果から採点基準の見直しを要すると判断した採点管理者は、採点基準の見直しを要すると判断した設問が含まれる試験を特定する試験ＩＤを採点管理装置２に入力する操作を行う。試験ＩＤの入力を受け付けた採点管理装置２は、記憶手段２４に記憶させたコンピュータプログラム２０２を実行する制御手段２１の制御により、受け付けた試験ＩＤに基づいて、設問別採点基準データベース３２ｃから、受け付けた試験ＩＤにより特定される試験の各設問に対して設定されている採点基準及び基準点等の情報を抽出し（Ｓ１００１）、抽出した採点基準及び基準点等の情報に基づき採点基準及び基準点の修正用の画面を出力手段２６から出力する（Ｓ１００２）。
【０１０２】
図３２、図３３及び図３４は、本発明の採点支援システムが備える採点管理装置２から出力された画面を示す説明図である。図３２は、採点基準修正処理のステップＳ１００２にて、出力手段２６から出力される採点基準修正用の画面である。図３２は、画面の上側に示されている様に、試験ＩＤが「２００４年」、「２級」及び「第１回」である試験について抽出された画像を示しており、当該試験の設問ＩＤ、設問形態及び採点項目別に、採点基準及び基準点の一覧が表示されている。また採点基準及び基準点の欄の右方には、修正と示された項目が設けられている。修正と示された項目には、一覧に示された各採点基準及び基準点に対応付けて、挿入、変更及び削除と表示されたコマンドが示されている。採点管理者は、挿入、変更又は削除と表示されたコマンドを指示する入力を行うことにより、採点基準及び基準点を修正することができる。ここでは、採点基準及び基準点の追加について説明する。
【０１０３】
図３３は、図３２に示された画面から、基準点が「５」に設定されているレコードを示した欄に対応付けられた挿入のコマンドを指示した状態を示しており、指示したレコードの上方に新たなレコードを示す欄が設けられ、採点基準及び基準点を入力する欄が表示されている。また新たに設けられたレコードを示す欄の右方は、登録と表示されたコマンドが示されている。
【０１０４】
図３４は、図３３に示された画面から、新たに設けられたレコードの採点基準及び基準点を示す欄に入力が行われた状態を示しており、図３３に示す状態から、登録と示されたコマンドを指示する入力を行うことにより、採点基準の修正処理が行われる。なお図３２に示す状態から変更と示されたコマンドを指示する入力を行った場合、当該コマンドに対応するレコードの採点基準及び基準点を変更する修正を行うことが可能となる。また図３２に示す状態から削除と示されたコマンドを指示する入力を行った場合、当該コマンドに対応するレコードを削除する修正を行うことが可能となる。
【０１０５】
図３１のフローチャートに戻り、採点管理装置２は、制御手段２１の制御により、採点基準及び基準点の修正の入力を受け付け（Ｓ１００３）、受け付けた採点基準及び基準点に基づいて、採点基準データベース３２ｂ及び設問別採点基準データベース３２ｃの記録内容を更新する（Ｓ１００４）。なお採点管理者が所定の操作を行うことにより、例えば基準点の修正の結果を、採点結果データベース３２ｇ及び決定採点結果データベース３２ｉに反映させることも可能である。このようにして採点基準修正処理が行われる。
【０１０６】
図３５は、本発明の採点支援システムにて用いられる採点管理装置２の採点結果調整処理を示すフローチャートである。採点管理者は、採点した結果から点数の調整が必要であると判断した場合、例えば平均点が低すぎると判断した場合、点数等の採点結果を調整することができる。採点管理者は、採点結果の調整の要否を判断すべく、採点結果の集計を閲覧する必要があると判断した場合、集計の対象となる試験を特定する試験ＩＤ及び集計の区分を指定する入力を行う。試験ＩＤ及び区分の入力を受け付けた採点管理装置２は、記憶手段２４に記憶させたコンピュータプログラム２０２を実行する制御手段２１の制御により、受け付けた試験ＩＤに基づいて、決定採点結果データベース３２ｉから、採点結果等の情報を抽出し（Ｓ１１０１）、抽出した採点結果を、受け付けた区分別に集計し（Ｓ１１０２）、集計した結果を区分別採点結果データベース３２ｌに記録し（Ｓ１１０３）、また集計した結果に基づく画面を出力手段２６から出力する（Ｓ１１０４）。ステップＳ１１０１では、決定採点結果データベース３２ｉに記録されている設問ＩＤ、受験者ＩＤ、設問形態、採点項目、採点基準及び点数の情報を抽出する。またここでは採点基準が区分として指定されているものとする。従ってステップ１１０２の集計は、各設問の各採点項目について、採点基準毎に集計したものであり、具体的には、図１５に示した内容で区分別採点結果データベース３２ｌに記録される。
【０１０７】
図３６及び図３７は、本発明の採点支援システムが備える採点管理装置２から出力された画面を示す説明図である。図３６は、採点結果集計処理のステップＳ１１０４にて、出力手段２６から出力される採点結果の集計結果を示す画面である。図３６は、画面の上側に示されている様に、試験ＩＤが「２００４年」、「２級」及び「第１回」である試験の設問「１」について集計された結果を示す画像であり、設問「１」の設問形態として「論説文の作成」が示されており、更に設問「１」の答案に対する採点結果の点数の平均点が計算され示されている。またその下方には、設問「１」の採点項目である「読解力」及び「構成力」について、採点基準別に件数、基準点、及び採点基準毎に計算された平均点が示されている。またその左方には、採点基準に対応する答案を検索するコマンドと、調整する調整点数を入力するための調整点数と示された入力欄と、調整点数の入力欄に入力された点数に基づき一括して点数の調整を行うための一括更新と表示されたコマンドが示されている。なお採点者が採点を行うに当たり、予め設定されている基準点と異なる点数を入力することも可能であるので、図３６に示す様に基準点と平均点とは必ずしも一致するとは限らない。そして採点管理者は、集計結果を確認し、点数の調整が必要であると判断した場合、例えば平均点が低すぎると判断した場合、点数等の採点結果を調整する操作を行う。
【０１０８】
採点管理者が採点結果の全体的な調整、俗に「下駄を履かす」と呼ばれる操作を行う場合、所望する採点基準に対応する調整点数の入力欄に「＋１」、「＋２」等の点数を入力し、一括更新と表示されたコマンドを指示することにより、即ち区分の指定及び指定した区分に係る採点結果に対する変更の入力を行うことができる。例えば調整点数の入力欄に「＋１」を入力し、一括更新を行うことにより、その調整点数に対応する採点基準が適用された全ての答案の点数に対し、「１」点が加算されることになる。なお採点管理者が、平均点が高すぎると判断した場合、減点のための調整点数、例えば「−１」を入力する。
【０１０９】
図３７は、図３６に示された画面から所望する採点基準に対応する検索と表示されたコマンドを指示することにより、即ち区分を指定することにより、表示される画面であり、指定された採点基準に基づく採点が行われた答案に係る採点画像、採点基準及び点数が示されている。採点管理者は、図３７に示された画面を確認し、必要に応じて採点の修正を行い、画面下側の「登録」と示された画像を指示することにより、採点結果を修正することができる。また画面下側の「前の答案」及び「次の答案」と示した画像を指示する入力を行うことにより、当該採点基準に対応する他の答案が出力される。図３７に示した画面を表示させて採点結果を修正することにより、即ち区分の指定及び指定した区分に係る採点結果に対する変更を行うことにより、個々の答案に対する採点結果の調整を行うことができる。
【０１１０】
図３５のフローチャートに戻り、採点管理装置２は、制御手段２１の制御により、入力手段２５から、区分の指定及び指定された区分に係る採点結果に対する変更の入力を受け付け（Ｓ１１０５）、受け付けた変更の入力に基づいて、決定採点結果データベース３２ｉに記録されている指定された区分に係る答案の採点結果を更新する（Ｓ１１０６）。このようにして採点結果調整処理が行われる。
【０１１１】
前記実施の形態では、無数に存在する本発明の適用の一例を示したものであり、本発明は、その目的、費用、規模、運用形態等の種々の要因に応じて様々な形態に展開することが可能である。即ち、システムの構成、装置の構成、データベースの構成、画面のレイアウト等の各種構成は、適宜設計することが可能である。
【図面の簡単な説明】
【０１１２】
【図１】本発明の採点支援システムの構成例を示す概念図である。
【図２】本発明の採点支援システムにて用いられる各種装置の構成例を示すブロック図である。
【図３】本発明の採点支援システムにて用いられる各種装置の構成例を示すブロック図である。
【図４】本発明の採点支援システムにて用いられる設問データベースの記録内容の例を概念的に示す説明図である。
【図５】本発明の採点支援システムにて用いられる採点基準データベースの記録内容の例を概念的に示す説明図である。
【図６】本発明の採点支援システムにて用いられる設問別採点基準データベースの記録内容の例を概念的に示す説明図である。
【図７】本発明の採点支援システムにて用いられる答案データベースの記録内容の例を概念的に示す説明図である。
【図８】本発明の採点支援システムにて用いられる採点者データベースの記録内容を概念的に示す説明図である。
【図９】本発明の採点支援システムにて用いられる採点可否データベースの記録内容を概念的に示す説明図である。
【図１０】本発明の採点支援システムにて用いられる採点結果データベースの記録内容を概念的に示す説明図である。
【図１１】本発明の採点支援システムにて用いられる一次採点結果データベースの記録内容を概念的に示す説明図である。
【図１２】本発明の採点支援システムにて用いられる決定採点結果データベースの記録内容を概念的に示す説明図である。
【図１３】本発明の採点支援システムにて用いられる採点者分析データベースの記録内容を概念的に示す説明図である。
【図１４】本発明の採点支援システムにて用いられる採点結果分析データベースの記録内容を概念的に示す説明図である。
【図１５】本発明の採点支援システムにて用いられる区分別採点結果データベースの記録内容を概念的に示す説明図である。
【図１６】本発明の採点支援システムにて用いられる採点管理装置の設問別採点基準設定処理を示すフローチャートである。
【図１７】本発明の採点支援システムにて用いられるデータベース装置の答案配布処理を示すフローチャートである。
【図１８】本発明の採点支援システムにて用いられる採点支援装置の一次採点処理を示すフローチャートである。
【図１９】本発明の採点支援システムが備える採点支援装置から出力された画面を示す説明図である。
【図２０】本発明の採点支援システムが備える採点支援装置から出力された画面内の画像を示す説明図である。
【図２１】本発明の採点支援システムにて用いられる採点支援装置の採点結果修正処理を示すフローチャートである。
【図２２】本発明の採点支援システムが備える採点支援装置から出力された画面を示す説明図である。
【図２３】本発明の採点支援システムにて用いられる採点管理装置の採点結果決定処理を示すフローチャートである。
【図２４】本発明の採点支援システムが備える採点管理装置から出力された画面を示す説明図である。
【図２５】本発明の採点支援システムにて用いられる採点管理装置の採点者別採点結果集計処理を示すフローチャートである。
【図２６】本発明の採点支援システムにて用いられる採点管理装置の採点者評価処理を示すフローチャートである。
【図２７】本発明の採点支援システムが備える採点管理装置から出力された画面を示す説明図である。
【図２８】本発明の採点支援システムが備える採点管理装置の採点区分別採点結果集計処理を示すフローチャートである。
【図２９】本発明の採点支援システムにて用いられる採点管理装置の採点基準集計結果出力処理を示すフローチャートである。
【図３０】本発明の採点支援システムが備える採点管理装置から出力された画面を示す説明図である。
【図３１】本発明の採点支援システムにて用いられる採点管理装置の採点基準修正処理を示すフローチャートである。
【図３２】本発明の採点支援システムが備える採点管理装置から出力された画面を示す説明図である。
【図３３】本発明の採点支援システムが備える採点管理装置から出力された画面を示す説明図である。
【図３４】本発明の採点支援システムが備える採点管理装置から出力された画面を示す説明図である。
【図３５】本発明の採点支援システムにて用いられる採点管理装置の採点結果調整処理を示すフローチャートである。
【図３６】本発明の採点支援システムが備える採点管理装置から出力された画面を示す説明図である。
【図３７】本発明の採点支援システムが備える採点管理装置から出力された画面を示す説明図である。
【符号の説明】
【０１１３】
１  採点支援装置
２  採点管理装置
３  データベース装置
３２ａ  設問データベース
３２ｂ  採点基準データベース
３２ｃ  設問別採点基準データベース
３２ｄ  答案データベース
３２ｅ  採点者データベース
３２ｆ  採点可否データベース
３２ｇ  採点結果データベース
３２ｈ  一次採点結果データベース
３２ｉ  決定採点結果データベース
３２ｊ  採点者分析データベース
３２ｋ  採点結果分析データベース
３２ｌ  区分別採点結果データベース
【図１】
2006277086.tif 000003
【図２】
2006277086.tif 000004
【図３】
2006277086.tif 000005
【図４】
2006277086.tif 000006
【図５】
2006277086.tif 000007
【図６】
2006277086.tif 000008
【図７】
2006277086.tif 000009
【図８】
2006277086.tif 000010
【図９】
2006277086.tif 000011
【図１０】
2006277086.tif 000012
【図１１】
2006277086.tif 000013
【図１２】
2006277086.tif 000014
【図１３】
2006277086.tif 000015
【図１４】
2006277086.tif 000016
【図１５】
2006277086.tif 000017
【図１６】
2006277086.tif 000018
【図１７】
2006277086.tif 000019
【図１８】
2006277086.tif 000020
【図１９】
2006277086.tif 000021
【図２０】
2006277086.tif 000022
【図２１】
2006277086.tif 000023
【図２２】
2006277086.tif 000024
【図２３】
2006277086.tif 000025
【図２４】
2006277086.tif 000026
【図２５】
2006277086.tif 000027
【図２６】
2006277086.tif 000028
【図２７】
2006277086.tif 000029
【図２８】
2006277086.tif 000030
【図２９】
2006277086.tif 000031
【図３０】
2006277086.tif 000032
【図３１】
2006277086.tif 000033
【図３２】
2006277086.tif 000034
【図３３】
2006277086.tif 000035
【図３４】
2006277086.tif 000036
【図３５】
2006277086.tif 000037
【図３６】
2006277086.tif 000038
【図３７】
2006277086.tif 000039