第145回 Moodleで相互評価をはじめよう• 相互評価学習の背景，先行研究• Moodleで相互評価をする方法– フォーラムモジュール（掲示板）と実践例– ワークショップモジュール（相互評価）– データベースモジュール– 設定のポイントは，ロールとパーミッション• こんな研究しています（キャリア教育で相互評価）• 相互評価の注意点• Moodleで相互評価を試してみませんか？
©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室

ランチョンセミナー1相互評価学習の背景• 相互評価学習とは– クラスやコース内で学習者同士が互いに評価し合うこと．
– ガニェの9教授事象：フィードバック（7）や学習の指針（5）を学習者同士で見つけていくこと（稲垣・鈴木 2011）– 学生主体の学習方法の一つである相互評価学習は，他者の成果から学ぶと同時に，他者視点を参照することで自己の内省を促すことができる（植野 2008）• 構成主義– 人や環境との関わり・相互作用を通じて学習する– 学習プロセスの重視• 新しい学力観（1989）– 相対評価から絶対評価へ，評価方法の工夫• eラーニングの普及– 学習場面に埋め込まれた評価，一体化した環境, 社会的存在感©2012 桑原千幸

2

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー

先行研究①• ICTを使わない相互評価– 責任感を持たせる→ピアレビュー証（関田 2004）– リフレクションシートにポストイット（溝上 2004）• 相互評価の実践– プレゼンテーション，情報教育，作品製作，総合的な学習• 相互評価学習の論点（藤原ほか 2007）– 学習コミュニティと評価コミュニティ– 相互評価支援システム– 評価の妥当性・公平性，評価者の選択，効果，教師の役割©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー

3

先行研究②• 多段階相互評価：学習者の相互評価を多段階で行う– 形成的評価として相互評価を繰り返すことによって，知識の定着，意見の明確化，成果物の質向上に効果あり– 学習者の提出した解答を中心とした擬似的フォーマルグ
ループを形成（布施・岡部 2010）– 評価を繰り返すことで有益なコメント数が増加．特に，評価能力の向上には補正表示が有効（藤原ほか 2008）©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー4フォーラムモジュール• 掲示板モジュール，学生にも評価の権限を与えることで，簡単な相互評価に使える• 主な設定項目– 評価の総計タイプ• 評価平均，評価数
最大評価，評価合計– 評価尺度は1種類のみ– 返信機能を利用して評価コメントも入力可能• フォーラムタイプ– 一般利用のための標準フォーラム or
各人が1件のディスカッションを投稿©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー5フォーラムモジュールの例
評価入力

評価閲覧

©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー6フォーラムを使った実践例• 情報倫理教育におけるプレゼンテーションの相互評価（河野 2012）① フォーラムに成果物を添付して投稿② 授業外でフォーラム上の自分の作品と他の学習者の成果物3つを評価し，結果を紙の評価シートに記入③ フィードバック機能を利用したフォームにすべての評価結果を入力④ 評価した他の学習者の成果物に対して，フォーラム上で，全評価項目の合計点で評価©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー

7

ワークショップモジュール• 相互評価のためのモジュール，複雑だが多機能• 評定方法– 累積評価，コメント，エラー数，ルーブリック• 提出例を提示して評価の練習をさせることができる• 評価の割り当て– ランダム：評価者／提出あたりのレビュー数を0-10，15，20，25，30から選択– 手動割り当て：教員がユーザをコンボボックスから選択©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー8相互評価学習の流れ（フェーズ）
教師

学習者• ワークショップのイントロダクションを設定する
セットアップ • 提出のインストラクションを記述する
フェーズ • 評価フォームを編集する• 提出例・評価例を準備する
提出
フェーズ• 評価のインストラクションを記述する• 提出を割り当てる• 提出開始日時、提出終了日時を指定可能

評価フェーズ
成績評価フェーズ

• 提出に対する評点を計算する• 評価に対する評点を計算する• 次のフェーズで学習者全員が閲覧できるように，提出物を公開することができる

終了©2012 桑原千幸

• 提出例を評価する• 自分のワークを提出する• 自分に割り当てられた提出を評価する• 自分の提出および評価の修正はできない• 自分の提出物、提出物への評価および他の提出物を閲覧する

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー

9

Moodle1.9→2.0ｘへの変更点• フェーズの管理と把握が容易になった．
（セットアップ，提出，評価，成績評価，終了）• フェーズの差し戻しによって，形成的評価を行うことができる．

• 複数の評価結果が一画面で表示されるようになった．
• 課題の提出後すぐに評価活動を行うことが可能になった．
• 設定が一部複雑に（匿名・実名設定はパーミッションで・・・）©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー

10評価入力画面（Moodle 2.0x）

11

評価の確認画面（１）12評価の確認画面（２）13データベースモジュール• 教師や学生が，レコードエントリのバンクを構築、表示および検索することができる– フィールドの種類• URI，テキスト，テキストエリア，ファイル，画像・・・• 学生がそれぞれエントリを追加し，相互に評価する．
• 評価尺度は1種類のみ（フォーラムと同様）• 評価コメントも入力可能©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー

14データベースモジュールの例
評価入力

評価閲覧

©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー

15データベースモジュールの設定
一定数のエントリを入力しないと，データベースの他のエントリを閲
覧できない©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー16ロールとパーミッション• Moodle1.7xから導入された機能• ユーザがどのように相互に動作するか管理できる• 事前に定義された7つのロール– 管理者，コース作成者，教師，編集権限のない教師，学生，ゲスト，認証ユーザ (1.8以降)– コースにユーザを登録する時には，あるロールを割り当てる– 特定の活動におけるユーザの動作を個別に制御するために，新たなロールを追加することも可能• （例） 学生（ロール）は，ワークショップモジュール（コンテクスト）において，評価者名を表示すること（ケイパビリティ）が，できない（パーミッション） → 学生者間の匿名相互評価©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー

1718©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー

研究：相互評価学習による進路選択自己効力の向上• 対面授業における実践の概要– キャリア教育科目における個人プレゼンテーションの相互評価– 対象学生：短期大学1回生 4クラス92名– 対象科目：2012年度前期キャリア教育科目（選択科目）– 評価対象：1人に対して本人以外の5人が匿名で評価– 評価項目：8 項目について5段階のルーブリックを学習者に提示– システム：Moodle 2.0xのワークショップモジュール• 調査項目– 進路選択自己効力尺度（浦上 1995）30項目4件法
①入学時（2012.4），②相互評価学習 実施前（第11回，2012.6）③相互評価学習 実施後（第15回，2012.7）– 学習課題に対する認知に関する質問項目（ARCS モデルを参考に）©2012 Chiyuki KUWAHARA

19

研究：授業の流れ回

内容
オリエンテーション

詳細尺度による調査①

相互評価学習1～
10
11 キャリアプラン作成

キャリア形成の概念，雇用形態，自己理解
ライフサイクル，社会人基礎力，職業観…

12

キャリアプラン作成

PowerPointの使い方，キャリアプランを作成

キャリアプランの相互評価①

評価規準の説明と評価の練習
ファイルを対象とした相互評価
評価の確認とキャリアプランの改善

キャリアプランの相互評価②

プレゼンテーションを対象とした相互評価

相互評価の振り返り

他者からの評価確認
自己評価入力（動画を参照）
アンケートの実施，尺度による調査③

13
14
15

尺度による調査②
キャリアプラン作成のための講義とワーク

20

研究：対面授業における実践の結果(N=63)CDMSE平均

77.19

81.05

90.91

標準偏差

11.05

11.28

11.50

• 1元配置の分散分析の結果，F(1.651,102.385)=74.259，
p < .01で有意な変化が見られた．
• Bonferroniの多重比較により， p < .01で入学時＜事前＜事後．
• 相互評価学習の実施前後で，進路選択自己効力が有意に上昇した．

21

研究：相互評価学習の要素と効力感の関連
Bandura
効力感を育む4つの源

相互評価学習の要素

先行研究

遂行行動の達成• キャリアプランの作成 • 協調学習による効力感向上（舟生・加藤, 2010）• キャリアプランを• 繰り返し評価を行うことで評価能力がクラスの前で発表
変化（藤原ほか, 2008）• 評価能力の向上

代理体験

他人を評価すること

言語的説得

他人から評価される
こと

情動的喚起

「楽しかった」「嬉しかった」• 多段階相互評価で，他者の意見を踏まえて自分の意見を明確化（布施・岡部, 2010）• ポストイット的相互評価による自身の学びの振り返り（溝上, 2004）• 情動の喚起が気づき・意欲・行動の変容に関連(内浦・毛受, 2008)©2012 Chiyuki KUWAHARA

22

研究：相互評価学習方法・システムの提案• 主な相互評価学習の先行研究では，独自開発システムを利用• 汎用性のある相互評価学習システムの必要⇒ Moodleのワークショップモジュールを改良•（参考）現在の評価確認画面•リフレクションの促進•他者からの評価を一覧・比較しやすく•多段階相互評価への対応•相互評価フェーズに柔軟性を持たせる•提出課題の改善履歴の可視化•評価能力の向上を把握できるようにする

23

相互評価の注意点• 相互評価の意義を十分に説明すること• 評価観点と基準の明確化– 評価基準を公開して，相互評価で用いる– 評価基準を学習者自身に作らせる• 評価能力に差がある– 補正表示するような機能があれば．．．
– 評価の公平性– 相互評価の得点をコースの得点に影響させるか• 学習者コミュニティの作り方– 学生は匿名を好む？
– お互いさま効果（藤原ほか 2007）©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー

24

Moodleで相互評価を試してみませんか？
• どんなものか，まずは触ってみたい！
→ テストコースを開放します．
http://lemon.kbu.ac.jp/moodle/• 自由にコースを編集できる教師ユーザアカウントを提供しますので，ご希望の方はご連絡ください．
ckuwahara@po.kbu.ac.jp©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー

25

参考文献
1.
2.
3.
4.
5.
6.
7.

8.
9.

稲垣忠・鈴木克明（2011）授業設計マニュアル―教師のためのインストラクショナルデザイン．北大路書房
植野真臣・ソンムァン・ポクポン・岡本敏雄・永岡慶三（2008）ピアアセスメントにおける評価者特性を考慮した項目反応理論．電子情報通信学会論文誌. D, 情報・システム J91-D(2) ：377-388
藤原康宏・大西仁・加藤浩（2007）学習者間の相互評価に関する研究の動向と課題．メディア教育研究
4(1) ：77-85
布施泉・岡部成玄（2010）多段階相互評価法による学習の実践と効果．日本教育工学会論文誌 33(3) ：287-298
藤原康宏・大西仁・加藤浩（2008）継続的な学習者間評価を導入した情報教育の実践．情報処理学会
論文誌 49(10) ： 3428-3438
河野稔（2012） 動画としてのプレゼンテーション制作と相互評価による情報倫理教育，教育システム情報学会第37回全国大会発表論文集：220-221
Moodleドキュメント「ワークショップモジュール」
http://docs.moodle.org/2x/ja/%E3%83%AF%E3%83%BC%E3%82%AF%E3%82%B7%E3%83%
A7%E3%83%83%E3%83%97%E3%83%A2%E3%82%B8%E3%83%A5%E3%83%BC%E3%83%AB
桑原千幸・喜多敏博・合田美子・鈴木克明（2012）キャリア教育における多段階相互評価の実践と進路選択自己効力の向上．日本教育工学会第28回全国大会発表論文集： 423-424
藤原康宏・大西仁・加藤浩（2007）公平な相互評価のための評価支援システムの開発と評価 : 学習成
果物を相互評価する場合に評価者の選択で生じる「お互い様効果」．日本教育工学会論文誌 31(2)：125-134©2012 桑原千幸

eラーニング推進機構eラーニング授業設計支援室
ランチョンセミナー

26