I2-17

教材設計企画書の点検効率化のためのチェックリストの開発－評価方法の見直しとチェック項目の再設計－

The Development of Checklist for Instructional Design Proposal- Review of the Evaluation Method and Redesign of the Check Items
to Improve Inspection Efficiency 平岡 斉士, 鈴木 克明
Naoshi HIRAOKA, Katsuaki SUZUKI
熊本大学大学院教授システム学専攻
Graduate School of Instructional Systems, Kumamoto University
Email: naoshi@kumamoto-u.ac.jp
あらまし：教授設計を学ぶ科目の提出課題の点検効率化を主目的としてチェックリストの開発を試みた．
現行のチェック項目の過不足を検討・修正したのち，各チェック項目に対する評価方法を改めた．さらにチェック対象の特性に合わせてチェック項目の分割や統合を行った．設計したチェックリストを実際に活用しながら改善を行い，科目全体を網羅する点検効率化のためのチェックリストの開発に繋げる．
キーワード：教材設計，チェックリスト，フィードバックの効率化

1.

はじめに独学用教材設計を通じて教授設計を学ぶ科目（インストラクショナルデザインⅠ，以下 ID1 と略す）の提出課題の点検の効率化を目的として，現行のチェックリストを大幅に見直すことでチェックリストの開発を試みた．本稿では 3 つある課題の 1 つである「教材企画書・前提テスト・事前/事後テスト・アンケート（課題 1）」のチェックリストの改善案と 3つの課題を網羅するチェックリストの開発のための今後の改善プロセスを述べる．

2.

ID1 の概要と現状の問題

2.1 ID1 の概要
ID1 は独学用教材の作成を通じて教授設計スキルを修得することを学習目標としたフル e ラーニングの科目である．設計する教材のテーマは学習者が自由に選択できる．例えば，コーヒーの淹れ方，ビジネス文書の書き方，PC の操作方法，心音の聴診方法，ワインの飲み方など多種多様である．したがって提出される課題の内容も多種多様である．
ID1 では 15 回の授業の中で 3 回の課題提出を行う．
課題 1 は教材設計企画書・前提テスト・事前/事後テスト・アンケート，課題 2 は指導方略表・課題分析
図・教材のサンプル，課題 3 は完成した教材・形成的評価の道具・教材設計報告書であり，各課題に合格しないと次の課題の提出はできない．課題に対しては教員から問題点の指摘と改善のためのアドバイスがなされる．課題が合格基準に達成していない場
合は「合格の条件」とアドバイスとともに再提出が課せられる．
2.2 現状の問題点と解決の方針
学習者側の問題課題 1 のためのチェックリスト（1）（以下，現行チェックリスト）は存在し，学習者自身あるいは学習者間で課題 1 をチェックするために活用されている．
しかしながら，提出された課題にはチェックされたはずの問題点が頻出している．すなわち現行チェックリストではカバーできない部分があることや学習者が使いこなせない可能性がある．そこでチェックリストを改善することで，自己あるいは相互チェックの結果の妥当性が高まり，点検が効率化される．
教員側の問題多様なテーマで作成される教材企画書に対して，機械的な添削や採点ではなく，問題点の指摘と改善のためのアドバイスを中心にしたフィードバックを行っている．課題 1 に対する教員からのフィードバ
ックは平均 2302 字（述べ 37 人分から算出）であり，教員 2 名がフィードバック 1 つを作成するための合計作業時間は 1－3 時間程度になる．効率化のためには，問題点とアドバイスの関連性を明確にし，過去のアドバイスの流用をシステマチックにできるようにすることが考えられるが，そのためにはチェックリストによる問題点の整理が有効である．
科目全体に関わる問題
現在は 3 つの課題のうち，課題 1 用のチェックリスト（主に学習者用）のみしか存在していない．3
つの課題全てのチェックリストを同じ基準で作成することで，課題 1 から課題 2，3 への教材の改善の推移のチェックが可能になり，改善プロセスを定量的に検討することができる．前の課題との比較をすることで，あらかじめチェックすべき項目を予測することも可能となるため，点検の効率化に繋がる．
解決の方針
まずは現行チェックリストを改善する形で，課題1 用のチェックリスト設計を行い，実際に活用しながら改善する．

3.

課題 1 用のチェックリストの設計

3.1 現行チェックリストの問題点と改善― 257 ―

教育システム情報学会 JSiSE2016
第41回全国大会 2016/8/29-8/31

現行チェックリストの評価方法は「OK/NG/NA」で統一されているが，項目によってこの評価方法が不適切な場合がある．例えば「学習目標があるか」ならば「ある・なし」，「学習目標の分類は適切か」
ならば「OK/NG」，「運動技能のチェック方法は適切か」ならば「OK/NG/NA（運動技能を学習目標にしていない場合は NA）」がそれぞれ明確な問い方である．そこでチェック項目を「項目の有無」「必須項目の妥当性」「非必須項目の妥当性」の 3 種類で分類し，分類ごとに評価方法を「ある・なし」「OK/NG」「OK/NG/NA」にした．そうすることで「ない」「NG」「NA」の違いが明確になり，より適切なチェックが可能となる．
また設計全体に関わる「教材企画書」とその具体物である「前提テスト・事前/事後テスト・アンケー
ト」は一貫性の確認のために個別チェックをするべ
きだが，現行チェックリストでは個別チェックができなかった．そこでチェックリストを「教材企画書」用と「前提テスト・事前/事後テスト・アンケート」用の 2 つに分割し，再構成した．
さらに現行チェックリストでは，事前テストと事後テストを個別にチェックする構成になっていたが，事前・事後テストはその特性上，同時にチェックするほうが適切であるため，事前テストと事後テストのチェック項目を統合した．

4.

ックリストに関連するアドバイス提案システム設計
は，本科目の後続科目である「インストラクショナルデザインⅡ」の点検効率化にも活用できる．また，この開発プロセスは，ID1 のようにアドバイス中心のフィードバックをする科目に対するチェックリスト開発に応用が可能であろう．さらには，現在は選択問題やピアレビューによるテストや評価を中心としている MOOCs などのオンライン科目でのレポート添削などに活用できる可能性がある．
参考文献(1) 曽山夏菜・鈴木克明: ”熊本大学大学院教授システム学専攻提供科目インストラクショナル・デザイン I 第５回資料 教材設計企画書チェックリスト”
表 1. チェックリスト(教材設計企画書）
教材のタイトルと内容教材の対象者集団１. 自分がよく知っている内容／よくできることか？
２. 教材作りの協力者が得られるか？
内容選択の理由 ３. 短時間で学習できるか？

チェックリストの今後の改善プロセス

４. 個別学習教
材で、教材が教材企画書タイトルが記載されているかタイトルが学習目標と過不足なく一致しているか教える内容について簡単な説明書きが付いているか対象者が記載されているか
学習目標から考えてその対象者は妥当か
条件1「自分がよく知っている内容/よくできることか」が記載されているか
条件1を満たしていると考える根拠が明確に書かれているか
条件2「教材で教える内容を理解していない人（教材で学ぶ必要のある人）を協力者として確保出来ているか。
もしくは確保できる見通しがあるか」が記載されているか対象者は教材の前提条件を満たし、かつ、学習目標を達成していない者といえるか
条件3「短時間（１時間）で学習できる内容・分量になっているか」が記載されているか
1時間で学習できる内容・分量になっているか
条件4「学習者が自分の出来具合を確認しながら一人で学習を進められるか」が記載されているか学習者が独学するための環境（教材で使用する道具や設備など）は問題なく準備出来そうか
独学教材であるのに学習中に第三者の支援を想定していないか
教材だけで学習目標を達成できる根拠が明確に記載されているか
学習目標が明確に書かれているか
評価条件が明確に書かれているかそれぞれの学習目標に、学習課題の種類を書いているか
それぞれの学習目標の種類は正しいか
事前事後テストの各設問と対応する学習目標を説明しているか
テストの評価条件・合格基準が明確に書かれているか
事前テストと事後テストは同レベルのテストを想定しているか
教材の利用資格（前提条件）があるか
前提条件は学習する上で適切か
報告書の氏名が記されているか（相互チェック後）点検者２名の氏名が記されているか。

ある/なし
OK/NGある/なし
ある/なし
OK/NGある/なし
OK/NGある/なし

OK/NG
ある/なし
OK/NGある/なし
OK/NG

作成したチェックリストが表１と表２である（以「独り立ち」でOK/NG
きるか？
下，新チェックリスト）．今後，筆者らによる課題
OK/NGへのフィードバック作成時に新チェックリストを使OK/NG
OK/NG
用しながらチェック項目の妥当性や過不足をチェッ
学習目標
ある/なし
OK/NG
クし，適宜修正する．
OK/NG
筆者らによる新チェックリストの改善検討が完了
事前・事後テスト
OK/NG
した後，学習者へ公開し，提出課題の問題点の指摘
OK/NG箇所等が，新チェックリストを使用する以前と比べ教材利用者の前提条件とある/なし
OK/NG
そチェック方法て改善されていることを確認する．併せて学習者にある/なし
報告書作成者名と点検者名ある/なし
自己チェック・相互チェックに使用してもらい，使い勝手などについての形成的評価を行い，改善する．
課題１に対するチェックリストの改善と平行して， 表２. チェックリスト（前提テスト・事前/事後テスト・アンケート）
前 提 テ ス ト ・ 事 前 /事 後 テ ス ト ・ ア ン ケ ー ト
課題２と課題３に対するチェックリストの開発を行
前提テストは、教材利用資格が不十分な人と十分な人とOK/NGを判別できる問題内容・合格基準になっているか。
前提テスト
う．その際には課題１のチェックリスト改善から得教材利用資格の有無をチェックする方法（前提テストのOK/NG問題・答え・合格基準）を具体的に説明してるかられたチェック項目の検討法や妥当性の確認法を用
事前テストと事後テストがあるかある/なし
事前テストと事後テストは同レベルのテストとなっていいる．チェックだけでなく，適切なアドバイスをす
OK/NG
るか
事前と事後テストの問題はそれぞれ学習目標全てを網羅るための支援となるよう，チェックの結果を踏まえOK/NG
しているか採点基準・合格基準・解説があるかある/なしてアドバイスが提示されるようにする．新チェック
事前と事後テストにそれぞれ合格した人は学習目標を達
OK/NG成していると言える問題＆合格基準になっているか
リストでのチェック項目と課題へのフィードバック
言語情報のテストは事前テストと事後テストとで同じ内
OK/NG/NA
内でのアドバイスとの関連データを元にして，チェ容を問う問題となっているか
事前・事後テスト
知的技能のテストは事前テスト事後テストとで同じレベOK/NG/NA
ック項目とアドバイスの関連付けを行う．将来的にルの異なる問題になっているか
知的技能のテストは、教材では扱わない未知の例を用いは，オンラインでチェックリストに回答すると該当
OK/NG/NAて、教材で学んだルールを応用させる設問になっているか。
するアドバイスが提案されるような仕組みを作る．
運動技能のテストには合否を判断するためのチェックリ
ストがあるか5.

展望
本チェックリストの開発・改善プロセスと，チェ― 258 ―

アンケート

OK/NG/NA

選択問題などの場合、偶然に正解できてしまう可能性を排除する工夫がされているか

OK/NG/NA

アンケートの質問は、教材をよくするための質問となっているか

OK/NG