第4章-教育评价结果的处理

第四章 教育评价结果的处理评价结果的质量检验、意义解释、反馈利用问题、为什么要探讨教育评价结果的处理问题？u 上一章我们主要探讨了教育评价实施的程序、评价资料的收集、分项评价结果的汇总以及综合评价结果获得等问题，但是，评价过程并不能到此完结，还需要对评价结果做出进一步的处理对评价结果的质量进行检验、对评价结果的意义做出解释、对评价结果进行反馈与有效利用（本章重点内容）。这是为什么呢？u 因为教育评价的目的在于：（1）为教育行政部门做出进一步的管理决策提供依据，提升教育管理工作质量；（2）为评价对象（教师、学生、学校）进一步改进工作提供依据，提升教育教学工作质量；（3）为改进评价方案与实施过程提供依据，提升教育评价工作质量。为此，必须进行上述对教育评价结果的三项处理工作。u 为了实现上述目的，对评价结果质量的检验是前提，在此基础上才能对评价结果的意义做出准确解释；而且，唯有根据这种解释对评价结果进行有效反馈与利用，才能最终实现评价的目的。第一节 教育评价结果的质量检验u 评价结果的质量检验包括两个基本方面，一是评价结果的可靠性（信度），二是评价结果的有效性（效度）。u 评价结果的可靠性（信度）：即评价结果的精确度、可信度；它主要取决于三个方面：评价者对评价标准把握的准确性、评价工具方法的精确性、评价结果的一致性。u 评价结果的有效性（效度）：即实际评价结果反映被评对象的欲评属性的程度，亦即“实评属性”与“欲评属性”（评价目标、内容）的符合程度。同样主要取决于三个方面：评价内容指标的全面性、权重确定的合理性、评价方法工具的有效性。u 评价结果的信度与效度的关系：信度是效度的必要条件而非充分条件；效度是信度的充要条件。一、评价结果的可靠性（信度）检验方法1、重复评价法u 间隔一段时间后，运用同样的评价指标与方法，对同一组被评对象进行再次评价，计算两次评价结果之间的相关系数。u 如果评价结果是连续数据，可以通过积差相关系数公式求算。u 这样得到的可靠性指标称为重测或再测信度。信度系数越大，信度越高。一般要求重测信度系数在0.9以上。2、分半统计法u 把评价内容指标按照序号的奇数与偶数分为两半，分别统计两半项目上的评价结果，然后求取它们之间的相关系数。u 这样得到的可靠性指标称为内部一致性信度。u 内部一致性信度系数的求算方法有两种（见教材P220）： （1）相关法：即直接求两半评价数据的积差相关系数 （2）方差法：即运用两半评价数据的方差进行求算3、肯德尔和谐系数法（W系数法）u 如果评价结果不是连续数据，而是等级数据（或者转化为等级数据）时，采取肯德尔和谐系数法求算相关系数。u 当同一评价者的结果出现相同等级时，需要使用校正公式。（见教材P221223）二、评价结果的有效性（效度）检验方法1、通过检验“评价内容与方法的有效性”进行检验u 评价内容的有效性：评价内容指标及其权重分配是否真正全面合理地反映了评价目标。u 评价方法的有效性：评价方法是否适合评价目标与评价对象的被评属性。2、通过检验“评价结果的预测有效性”进行检验u 评价结果的预测有效性：即现行评价结果对评价对象属性未来发展状况水平进行预测的有效程度。u 评价结果的预测有效性指标：可以以某次评价结果为标准（称为“效标”），求算它与此后某项评价结果的相关系数。u 例如，检验高考评价结果对大学学习状况的预测有效性，就可以“高考成绩”为效标，求算它与大学一年级成绩之间的相关系数。第二节 教育评价结果的解释u 即评价结果对评价者、评价对象意味着什么？意义何在？u 对评价结果的解释是做出改进工作决策的依据，因而是有效反馈与利用评价结果的依据。u 不同性质的评价结果（如相对评价结果与绝对评价结果），由于做出价值判断的标准不同，因而需要应用不同的方法进行解释。一、相对评价结果的解释方法u 相对评价结果是以“相对标准”为依据得到的评价结果。u 相对标准即根据被评群体的实际状况或一般水平所设定的相对统一的评价标准。通常称为“常模”（norm）。这种标准适合于选拔性评价，如高考、中考、评选先进中所使用的评价标准。u 正因为相对评价的目的在于选拔或甄别，为此，对相对评价结果的解释需要确定评价结果在团体中占据的“位置”或“地位”。1、确定分数地位的方法：把原始分数转化为“百分等级”分数u “百分等级”分数：某个原始分数以下的人数在全体被评人数中所占百分位置。意义就是被评对象属性在团体中所处相对位置。u 求算百分等级分数的方法（见教材P226227）： 制作原始分数“以下（由高到低）频数分布表” 用某个原始分数的“以下累积”频数（人数）除以总人数，再乘以“100”，这样就得到了它的“百分位置”。2、确定分数地位的方法：把原始分数转化为“标准分数”u （1）“标准分数”（Z分数）的意义 为同类分数提供了“可比性”、“可加性” 每个Z分数都对应着一个“百分等级” 提醒大家：P385表格中，某个Z分数对应的“百分等级”是指“从0到右面某个Z值”的“百分等级”（P值），因此，规则如下：如果Z0，则其对应的百分等级是“0.5P”如果Z0，则其对应的百分等级是“0.5P”u （2）“标准分数”（Z分数）求算及其转化形式 注意：“个体”与“群体”Z分数求算公式的不同 Z分数转化形式：T分数、C分数、托福分数3、相对评价结果解释与应用时应当注意的问题 （1）相对评价结果只表明被评对象在群体中的相对位置，并不表明其绝对水平或达到理想目标的程度。 （2）由于相对评价标准是相对的（被评群体的一般水平），评价结果也是相对的。因而相对评价只适合以区分和选拔为目的的评价，而不适合以改进工作为目的的评价。 （3）相对评价结果的解释要注意原始分数的分布形态。只有在正态分布或近似正态分布情况下，才能依据标准分数求出原始分数的百分等级（相对位置）。 （4）当对群体相对位置进行比较时，通常以群体平均数作为群体水平的代表值。 （5）由于相对评价只在群体内进行横向的高低比较，因而表现出强烈的竞争导向，因而要注意防止负面效应的发生。二、绝对评价结果的解释方法u 绝对评价结果是以“绝对标准”为依据得到的评价结果。u 绝对标准：根据预定教育目的或目标要求所设定的绝对统一的评价标准。这类标准更能反映评价的实质，它适合于水平性评价、达标性评价，如平时进行的形成性评价标准，四、六级大学英语考试评价标准等。u 绝对评价的目的在于确认评价对象属性是否“达标”或“合格”，并发现其“优势”或“不足”之处。u 因此，绝对评价结果的解释方法有两种： 1、求算评价结果对应的“正确百分数” 2、依据“合格分数”确定评价结果是否“合格”u 绝对评价结果解释与应用时应当注意的问题 （1）绝对评价结果可以表明被评者的实际水平，能为被评者指出努力方向和具体要求。 （2）由于绝对评价关注被评者的实际水平而不关注被评者之间水平高低关系，因而绝对评价结果适用于以改进工作为目的的评价，而不适用于以区分和选拔为目的的评价。 （3）长期单纯使用绝对评价，容易使被评者产生安逸感，起不到竞争、激励的作用。 （4）绝对评价标准的制定真正达到客观比较困难。 （5）绝对评价常与相对评价结合使用，以便既了解被评者的实际水平，又清楚其在群体中的相对位置。第三节 教育评价信息的反馈与利用u 教育评价信息主要就是指教育评价结果及其解释结果（包括改进指导建议）一、教育评价信息反馈应当注意的问题u 1、反馈时机：反馈要及时u 2、反馈内容：反馈要全面u 3、反馈效度：反馈要准确u 4、反馈方式：方式要多样u 5、反馈效能