記述式試験対応採点処理システムの開発
田中 忠芳 A，益野 一哉 B，王 宝禮 B
１ はじめに大学入学後，学びのパラダイムは転換すると考えらた採点処理システムに資する有意義な知見が得られた。
これらについて報告する。

れ，学生の学びを転換するために，大学教育は重要な役割を担っている。とりわけ，歯科医学教育分野にお２ 自由記述形式への e-Learning システム対応

いては，専門基礎科目と専門科目との接続，専門知識「大学入学共通テスト」は，新たな試験体制として，の臨床への応用など，重要な課題が残っている。昨今

既存のマークシート形式，英語 4 技能評価にかかる民の歯科医学を取り巻く環境の変化に呼応して，歯科医間の資格・検定試験の活用，記述式問題の導入を謳っ師養成の目標や過程が見直されてきている 1)。ており，e-Learning のシステム対応としては，既存の一般に，教育の現場においては，学修者の深い理解仕組みが利用可能な前者 2 つと異なり，自由記述を評と思考力・判断力・表現力を育成するために，記述式価する必要のある記述式問題への対応が新たに必要と試験問題を出題することが推奨される。ところが，記なる。

述式試験の採点作業において，量的かつ質的な負荷が記述式問題の解答パターンとして，次の 4 パターン教員に加わることから，記述試験問題の出題が敬遠さを想定した。

れ，学修者の深い理解と思考力・判断力・表現力の育

・単語解 … 1 単語にて構成される解答。

成が後回しにされることが少なくない。

・短文解 … 80〜120 文字程度，2 センテンス以内で文部科学省は，平成 29 年 7 月 13 日に「大学入学テ構成される解答。規準としては第２回「大学入学共スト実施方針」を取りまとめ，その中で，大学入試セ通テスト」
プレテストで設定された最大文字数までンター試験に代わるテストとして平成32 年度から「大とし，長文解については考慮しないものとする。

学入学共通テスト」を実施すること，マークシート式・数値解 … １数値にて構成される解答。単位設定ま問題における知識の深い理解と思考力・判断力・表現で設問に指示されているものとする。

力を重視した作問への見直し，記述式問題の導入，英・数式解 … 数式で構成される解答。

語４技能評価にかかる民間の資格・検定試験の活用な想定した 4 パターンに対して，それぞれに対しての対どを示した 2)。

応方法を検討した。

現在，大学入試テスト委員会等が進めている試行調

・単語解 → 解答として用意されている複数の単語に査（プレテスト）でも判明しているとおり，記述式問

ついてシソーラスを参照し，設定された階層内に含題の解答を採点するコスト，受験者の自己採点と実際まれる単語を取得し，重み付けを設定した上で，この結果との開き等が問題視されている。

れとマッチングする。

このように，記述式問題採点作業の負担軽減，記述・短文解 3-5) → 形態素解析，文章マッチング解析。

式問題の採点コストの削減，採点基準の定式化などを・数値解 → 単純な完全一致。

目指した，記述式試験に対応した採点処理システム開・数式解 → 青木らによって開発・運用が進められて発は，緊急の課題である。
本研究では，記述式問題の採点処理を e-Learningシステムへと組み込むため，想定される解答を 4 パタ

いる e-Leaning システム WebStudy などで用いられている 6) 数式処理ソフトウェアMathematicaが提供する標準型への還元処理を利用する。

ーンに分類し，これらを自然言語処理的なアプローチ等を用いることによって採点の半自動化を図った。解答群の類似度を比較したところ，記述式試験に対応し———————————————————————————————————————————————————————
A：金沢工業大学
B：大阪歯科大学

３ 解答の類似度比較の結果
今回，「炎症」を短文で説明する問いを設定し，その問いに対する正答例として，次の 3 通りの正答を準備した。

誤答と正答 3 つとの比較結果と，正答間での比較結果との間で，1～2 桁程度の差が得られた。なお，値が高いほど類似したものと判断される。

正答 A：炎症とは，生体が微生物の侵入や物理的・化学的刺激などを受けて，5 大徴候として発熱（熱感）
・

４ 考察と展望

発赤（赤くなる）・腫脹（はれる）
・疼痛（いたみ）

表１の結果から，今回開発したシステムを用いるこなどからの症状を呈し，局所に機能障害を起こすことで，記述式試験問題に対応した採点処理が十分に可とである。

能であることが示唆された。今回 TF-IDF 値の算出の際，IDF は正答も回答も合わせて算出したが，これを正答 B：炎症とは，生体の恒常性を構成する解剖生理分割するなどによって本手法の拡張性を活かした判定学的反応の一つであり，恒常性を正常に維持する非精度の向上が見込まれる。

特異的防御機構の一因である。生体に，これらの異短文解について，現行では「解答例＋解答規準」と常が生じると 5 大徴候として，発赤，発熱，腫脹 ，いう形式になっており，「解答規準」についても併せて疼痛，機能障害を特徴とする。

チェックする必要がある。
「解答規準」は，今後，大きく変わっていく可能性もある。また，現在の「解答規正答 C：炎症は，発赤，はれ，熱，痛みを 4 特徴とす準」仕様のみをトレースするのでなく，「e-Learningる病変であり，機能障害がつけ加えられて 5 つの徴のシステムとして自由記述対応するならば」といった候を表わすものが炎症の 5 大徴候である。炎症は物姿勢でシステム開発する方が妥当であると考えられる。

理的・化学的外力や微生物など，なんらかの刺激に今後，規準として，たとえば非正解例の追加などが対して生体組織の示す一種の防衛反応とされている。 考えられ，それらを想定してシステム構築を進めていく予定である。
また，誤答例として，次の誤答を作成した。
誤答：炎症についてはよく分からないが，私はオレジとリンゴではリンゴが好きだ。特に青森産のリンゴが好きだ。私は以前は青森に住んでいたが，今は東京に住んでいる。
これらの文章間の類似度比較をした。その結果を表１に示す。文章間の類似度としては cosine 距離を利用している。また，文章のベクターデータへの変換は形態素解析を用いて品詞へと分解した後，名詞情報に対して TF-IDF 値を算出した７)。
表１ 文章間の類似度比較
文章比較パターン

類似度 [%]

誤答 vs. 正答 A

0.948％

誤答 vs. 正答 B

0.667%

誤答 vs. 正答 C

2.43%

正答 A vs. 正答 B

26.2%

正答 A vs. 正答 C

40.8%

正答 B vs. 正答 C

23.1%

引用・参考文献
1) 三浦公嗣：歯学教育に求めるもの，日本歯科医学教育
学会雑誌，vol.24，2008，p.127-131.
2) 文部科学省：高大接続改革「大学入学者選抜改革について」大学入学共通テスト
http://www.mext.go.jp/a_menu/koutou/koudai/det
ail/1397731.htm（2019 年 12 月 26 日参照）
3) 高橋勇，宮川勝年，小高知宏 他：Web サイトからの剽窃レポート発見支援システム，電子情報通信学会論文誌. D, 情報・システム，vol.90, no.11(通号 431)，2007，p.2989～2999.
4) 村田剛志：参照の共起性に基づく Web コミュニティの発見，人工知能学会論文誌，vol.16, no.3 B，2001，p.316-323.
5) 松尾豊，石塚満：語の共起の統計情報に基づく文書からのキーワード抽出アルゴリズム，人工知能学会論文誌，vol.17, no.3 D，2002，p.217-223.
6) 青木謙二，久保田真一郎，鍵山茂徳：e ラーニングによる理系基礎学力評価システムとコンテンツ開発，情報処理学会研究報告コンピュータと教育（CE），vol.2005，no.123(2005-CE-082)，2005，p.25-32.
7) 徳永健伸：情報検索と言語処理，東京大学出版会，1999.