system: [SYSTEM]

user: 3. 教学指标体系构建 3.1. 建立指标体系 在研究相对复杂的事物的时候，通常很难用单个指标反映该事物的主要特征，这就需要建立指标体系来全面系统的反映复杂事物。这些指标具有一定的内部联系，同时也要尽量去除相关部分和信息叠加的部分，因此指标选取是否科学合理至关重要。 校院两级督导教学质量评价涉及众多因素，对这些因素的选取将影响对教师教学质量的评价与分析。选取评价指标根据科学性，系统性，可行性，动态性，可比性等原则，主要应依据以下几方面确定：1) 根据对学生调查收集的结果进行分析，选择学生在教学中对教师和教学较为关注的因素作为评价指标；2) 向相关专家及校院两级相关教学管理人员进行咨询，对专家和管理人员提供的资料进行汇总分析，确定所需选择的评价指标。3) 调查已实施校院两级督导教学评价院校的实际情况，总结其取得的成绩，分析其存在的不足，找出其中较为重要的影响因素，作为评价指标。 根据以上途径进行调研，我们确定了校院两级督导教学质量评价指标如表1所示。 Table 1 Teaching quality evaluation inde 目标层A 指标层B 因素层C 具体评判标准 校院两级 督导教学 质量评价指标 校级督导 教学质量评价 (B 1 ) 教学水平(C 11 ) ① 教学内容是否熟练；② 讲授条理是否清楚； ③ 语言是否简洁。 教学态度(C 12 ) ① 衣着、举止得当；② 备课充分； ③ 讲课认真有激情 教学互动(C 13 ) ① 讲课生动；② 与学生互动交流； ③ 课堂气氛活跃 院级督导 教学质量评价 (B 2 ) 专业水平(C 21 ) ① 本专业知识渊博；② 掌握专业前沿理念； ③ 能理论与实践相结合 讲授准确(C 22 ) ① 基本概念讲授准确；② 基本理论讲授准确； ③ 基本案例分析准确 重难点把握(C 23 ) ① 重点突出；② 难点分散；③ 难易结合 教学信息量(C 24 ) ① 教学信息量适中；② 教学信息前后相关性强；③ 学生接受程度 教学创新改革(C 25 ) ① 课堂创新改革；② 作业创新改革； ③ 考试创新改革 表1. 校院两级督导教学质量评价指标 校级督导主要注重教师的教学水平，教学态度和教学互动三方面，这些指标由于不涉及具体专业内容，非本专业校级督导也能根据自身工作与教学经验进行判断，打分较为公正；院级督导主要注重教师的专业水平，讲授准确，重难点把握，教学信息量，教学创新五方面，院级督导对本学院专业更熟悉，更能从专业的角度去评价教师的教学质量。 3.2. 确定权重 确定了指标体系之后就需要对各个指标进行相对权重的确定，也就是对各个指标在评价体系中的重要程度进行确定。目前权重的确定主要分为主观赋权法和客观赋权法，指标权重的分配将影响到评价的结果和评价的有效性。本文对校院两级督导制度下教学质量评价指标体系是一个多层次、多因素的指标评价系统，但选取的很多指标不能量化，同时为了尽量避免主观评价带来的各种偏差和其他因素的影响，所以选择层次分析法(AHP)来确定各风险评价指标的权重。指标权重计算如下： 1) 建立层次结构模型 首先需要建立相应的评价指标体系，建立的指标体系需要条理清晰，内容合理，给出评判对象的因素集和子因素集，依据各风险评价指标关系构建一个层次结构模型。 2) 构造判断矩阵 进行问卷调查设计，根据校院两级督导制度下教学质量评价指标体系的实际调查中所考虑的指标项和子指标项，对同一层次的指标的重要性进行两两比较，得到比较判断矩阵，按照五级标度法把因素之间的重要性分为五等，如表2所示。 Table 2 Five-dimensional sealin 标度 定义(比较因素i与j) 1 因素i与j一样重要 2 因素i比j稍微重要 3 因素i比j较强重要 4 因素i比j强烈重要 5 因素i比j绝对重要 倒数 表示因素i与j比较的标度值等于因素j与i比较的标度值的倒数 表2. 五级标度法 设计好调查问卷，选取合适的调查对象进行了调查，为了保证权重确定的科学性和客观性，该调查问卷的被试者主要来自于学生、教师、督导和校院两级教学管理人员。问卷调查完毕后进行整理，并构造判断矩阵。根据构造矩阵，计算出判断矩阵的最大特征根值 λ max 所对应的特征向量，其排序结果也就是计算出来的权重值，并进行一致性检验，看是否通过检验，从而计算出各个风险指标的权重。共调查专家8人，根据咨询专家意见，指标层判断矩阵如下： E 1 = ( 1 1 / 2 2 1 ) ， E 2 = ( 1 1 1 1 ) ， E 3 = ( 1 1 / 3 3 1 ) ， E 4 = ( 1 1 / 3 3 1 ) ， E 5 = ( 1 1 / 2 2 1 ) ， E 6 = ( 1 1 1 1 ) ， E 7 = ( 1 1 / 2 2 1 ) ， E 8 = ( 1 1 / 2 2 1 ) 对E 1 运用matlab对矩阵进行最大特征根 λ max ，并求出相对应的特征向量： = 2，特征向量为(0.4472， 0.8944) T ，对特征向量进行归一化处理，可得(0.333， 0.667) T ，接下来结算一致性指标CI，由公式 C I = ( λ max − n ) / ( n − 1 ) 可得， C I = ( 2 − 2 ) / ( 2 − 1 ) = 0 计算随机一致性比率CR = CI/RI，其中RI为平均随机一致性指标，取值如表3所示。当 C R ≤ 0.10 时，判断矩阵具有满意的一致性，否则应予以调整。 Table 3 Mean random consistency inde n 2 3 4 5 RI 0.00 0.58 0.90 1.12 表3. 平均随机一致性指标值 CR = 0 < 0.10，因此指标层的判断矩阵符合一致性要求，因此，第一个专家的B 1 权重为0.333，B2权重为0.667。 同理，对判断矩阵E 2 到E 8 求取最大特征根和特征向量，分别得到它们的权重，最后运用平均法求出最终结果，结果为B 1 = 0.354，B 2 = 0.646。 因素层由于涉及指标较多，采用专家先统一意见，确定判断矩阵，再对因素层求最大特征根和特征向量，对特征向量进行归一化处理，并进行一致性检验，计算结果见表4和表5所示，所有CR均不超过0.10，因此判断矩阵符合一致性要求。 Table 4 B1 Factor item discriminant matrix， weight and CR valu 因素项 C 11 C 12 C 13 权重 C 11 1 3 1 0.443 C 12 1/3 1 1/2 0.170 C 13 1 2 1 0.387 λ max = 3.018， CI = 0.009， RI = 0.58， CR = 0.015 表4. B1因素项判别矩阵、权重及CR值 Table 5 B2 Factor item discriminant matrix， weight and CR valu 因素项 C 21 C 22 C 23 C 24 C 25 权重 C 21 1 2 2 3 3 0.370 C 22 1/2 1 1 2 2 0.208 C 23 1/2 1 1 2 1 0.184 C 24 1/3 1/2 1/2 1 1 0.110 C 25 1/3 1/2 1 1 1 0.128 λ max = 5.055， CI = 0.014， RI = 1.12， CR = 0.013 表5. B2因素项判别矩阵、权重及CR值 3.3. 模糊综合评价 模糊综合评价法是利用模糊数学这一工具，对校院两级督导教学质量评价指标进行分析，并对教师教学质量进行评价的方法。教学质量受到许多因素的影响，而这些因素还要受到一系列子因素的影响。因此，用模糊数学理论构建校院两级督导教学质量评价模型，综合系统中的多个影响的因素进行多层次评价，是对高等院校教师教学质量评估较为科学、合理的方法。 1) 建立高等院校教师教学质量评估综合因素评价集合V 根据表1， V = { B 1 ， B 2 } = { 校 级 教 学 督 导 评 价 ， 院 级 教 学 督 导 评 价 } 2) 质量标准化各因素的权重分配，根据上一小节对权重的确定， 3) 校级和院级教学督导教学质量评价等级 结果如表6所示。 Table 6 Estimation scal 教学质量评价得分(S) 90 80 70 60 50 等级 优秀 良好 中 合格 不合格 表6. 评价等级 4) 建立评价矩阵R i 由院级专家投票得评价矩阵R 1 ， R 1 = ( 0.8 0.1 0.1 0 0 0.9 0.1 0 0 0 0.8 0.2 0 0 0 ) 由院级专家投票得评价矩阵R 2 ， R 2 = ( 0.9 0.1 0 0 0 0.9 0.1 0 0 0 0.8 0.2 0 0 0 0.8 0.2 0 0 0 0.9 0.1 0 0 0 ) 5) 求各因素评价矩阵 由公式 B i = C i × R i 可得，其中C i 为因素层的指标权重向量矩阵， B 1 = C 1 × R 1 = ( 0.443 0.170 0.387 ) × R 1 = ( 0.8 0.1 0.1 0 0 0.9 0.1 0 0 0 0.8 0.2 0 0 0 ) 因此， B 1 = ( 0.817 0.139 0.044 0 0 ) 同理， B 2 = ( 0.871 0.129 0 0 0 ) 6) 建立总评价矩阵B B = ( 0.817 0.139 0.044 0 0 0.871 0.129 0 0 0 ) 7) 求风险评价矩阵C C = A × B = ( 0.354 0.646 ) ( 0.817 0.139 0.044 0 0 0.871 0.129 0 0 0 ) = ( 0.852 0.133 0.016 0 0 ) 8) 对工程造价风险评价矩阵C进行归一化处理 C = ( 0.851 0.133 0.016 0 0 ) 9) 求系统总得分 评价矩阵C表明，当教学质量评价状况按五个等级评价时结果的分布情况。如果按表6对各种等级以百分制打分，则可求得系统的总得分f。 f = C 1 × S 1 + C 2 × S 2 + C 3 × S 3 + C 4 × S 4 + C 5 × S 5 = 0.851 × 90 + 0.133 × 80 + 0.016 × 70 + 0 × 60 + 0 × 50 = 88.35 因此校院两级督导教学质量综合评价得分为88.35，经过调查发现，与该老师以往表现和其他教师及学生评价情况基本相符。因此评价指标较为科学有效，评价结果具有一定的合理性。