教育评价的方法

第六章教育评价的方法,第一节教育评价方法概观第二节收集教育评价信息的方法第三节处理教育评价信息的方法,第一节教育评价方法概观,一、教育评价方法的概念人们为了认识教育活动的价值以教育活动的某一要素或者全部活动为对象进行价值判断所采取的活动方式、程序和手段的总称,二、教育评价方法归类,（一）根据教育评价的基准（参照点）不同，可分为：1、绝对评价法：是在评价对象的集合之外确定一个标准。评价时把评价对象民客观标准进行比较。2、相对评价法：是在评价对象的集合之中选取一个或若干个作为基准，然后把各个评价对象与基准进行比较。3、个体内差异评价法：是将被评价者的过去和现在比较，或将评价对象的不同方面进行比较。“基准”主要用来表示被评价对象达到什么程度才是合乎基本要求的，它是区分被评价对象不同表现水平的临界点。,（二）从思维方法的角度来分：,1.定性分析评价法：预先根据评价的观点，把评价内容分解为几个项目，分别进行评价。2.定性综合判断法：对评价对象的整体进行综合性的评价。定性分析：是用语言描述形式以及哲学思辩、逻辑分析揭示被评价对象特征的信息分析、处理方法。其目的是把握事物质的规定性，形成对被评价对象完整的看法。它是分析和处理教育评价信息的常用方法。,（三）从行为的角度来分：,1.行为目标评价法：就是采用可观测的行为目标作为评价的依据的一种评价方法。行为目标的表达方式应注意的问题：它由“行为”、“条件”、“标准”和“对象”四要素组成。2.临床督导评价法：就是对被评价者的实际行动进行直接的现场观察和记录，然后把观察结果和评价意见反馈给被评价者，并和被评者一起讨论改进措施的一种评价方法。,（四）从单项指标评分的方式方法分：,1.指标评分法2.等级换分法,（五）从综合评价的方式方法来分：,1.加权平均法：是通过自评、专家组评、社会群体等不同方面的评价，或学生、教师、领导等不同阶层的评价者的评价来综合评定被评价者的分数。优点：其分数的合成来自多方面，从而避免了单方面评价的片面性。2.模糊综合评判法3.集体综合评价法4.坐标综合图示法,2.模糊综合评判法,概念：是将模糊数学应用于教育评价，以解决在多因素前提下对模糊数据进行的综合的问题。基本步骤是：1）确定评判的因素集U2）确定因素权数3）确定评价等级4）建立因素集的模糊矩阵5）选择评判模型6）计算综合评判值,4、建立因素集的模糊矩阵(mn阶矩阵),行：模糊子集,列：评价因素的隶属度,5）选择评判模型,现以例题来说明综合评判值的运算过程：例：50位评价者对某位教师的课堂教学质量进行综合评分，方法如下：设因素集U为五项并分配权数为0.20.30.20.10.2，据此编制出教育评价问卷表。在权集设计中，得到的权重向量为：W（0.2，0.3，0.2，0.1，0.2）假定50位评价者的评价构成如下一个矩阵R：,假如选用批判模型M（，）,第二节收集教育评价信息的方法,一、评价信息的收集标准：准确性、可靠性和时限性。二、评价信息的收集方法观察法、访谈法、问卷法、听汇报、座谈会、收集文字资料、测试,(一)观察法,观察法是指在评价过程中，评价者凭借自身的感觉器官和其他辅助工具，有目的、有计划地对评价对象的某种心理活动的外观表现进行捕捉，为评价提供素材的一种方法。1、观察法的特点2、观察法的基本要素3、观察法的优点与局限4、观察法的步骤5、观察法的设计与实施策略6、观察资料的整理分析,1、观察法的特点,直接性：指观察者与观察对象的直接接触与联系；情感性：指观察者往往容易受到个人的感情色彩和“先入为主”成见的影响；重复性：指观察者对研究对象的认识需要经过多次详细观察，才能避免表面化和片面化。目的与计划性：指观察法不同于日常教学的以随机性、即时性为主的观察，其核心任务是针对特殊选择的需要、发现一些内容的情况、回答特定范围的问题。所以它需要事先进行研究设计，突出目的性和计划性。,2、观察法的三个要素,观察的手段：作为观察研究的手段，要求敏锐、仔细、准确。研究者要具备一定的理论知识和较宽的视野，能够从多角度看问题，以及借助各种现代的技术手段，提高观察的精确性、系统性、全面性。观察的对象：包含两方面的意思：教育活动中的人和教育活动。观察对象的状态：应该维持在一种“真实状态”，不致因为受到外界的影响、干预或控制，而处于一种特殊的身心状态。保证真实状态下的观察结果。,3、观察法优点与局限,优点：简便易行、资料可靠性较高。局限：观察的材料是表面性的和感性的，不能判断“为什么”这一类因果关系的问题，只能说明“有什么”和“是什么”问题；观察受到时间和情境的约束和限制，在研究人数多且分散的情况下应用困难；由于教育现象的复杂且处于不断变化之中，观察项目归类推论性太多，会影响研究的信度；观察的样本数小（样本容量小），观察的资料琐碎不易系统化，普遍性的程度不高，结果难免带有片面性和偶然性。,4、观察法的步骤,根据桑代克及哈根的论述，观察法的步骤是：（1）选择所要观察的行为的某一方面；（2）确定所要观察的范围，最好列出表格；（3）训练观察人员；（4）量化观察；（5）发展可行的记录程度（目的是使观察进入科学化范围）。,4、观察法的步骤,关于实施步骤，基本图式如下（P64）：观察法的实施过程是一个循环模式。具体说，它包括以下6个程序：,4、观察法的步骤,观察法实施的6个程序：（1）明确观察目的和意义，确定观察对象、时间、地点、内容和方法；（2）通过检索资料、专家访谈等，搜集有关观察对象的文献资料，并进行阅读分析，对所要求观察的条件有一个最一般的认识，为观察做好充分准备；（3）编制观察提纲；（4）实施观察；（5）资料收集记录；（6）分析资料，得出结论。,5、观察法的资料记录,观察法记录一般有以下三类方法：描述记录日记描述法、轶事记录法、连续记录法取样记录法时间取样法、活动取样法、事件取样法行为核对表（P66-67）,6、观察代码系统的制定,观察代码系统是将行为或事件分为有意义的、可以观察和处理的类别，将大的行为单位分为小的行为单位，并为观察、记录和随后分析处理的方便而制定出的一整套符号系统。使用观察代码系统的功能：可以提高观察记录处理分析的针对性、有效性，节省大量的时间和精力。由代码所产生的数据可消除大量主观误差，是对所发生事件更客观、更准确的描述；由于观察的信度、效度和分析资料的方法事先已基本确定，因而观察的可行性高，记录更有意义；用观察代码系统收集的数据适于用计算机处理。,6、观察代码系统的制定,常用的几类观察代码系统数字型代码系统符号型代码系统,师生课堂交往行为的数字型观察代码系统,师生交往符号型代码系统,(二)访谈法,访谈法是访问者与被访问者通过面对面的接触、有目的谈话，以寻求研究资料的方法。1、调查访问法的基本概念访谈调查与日常交谈不同：第一，访谈比日常交谈更有目的性。第二，交谈双方在关系上不同。日常交谈是一种比较平等的人际关系，而研究性的交谈，构成的是一种比较特殊的人际关系。研究者控制交谈的内容、方式以及信息的类型和容量，一般是研究者提出问题，被研究者回答。,2.访谈法的类型,依据在调查访问时的控制程度不同，划分为：1)结构型访问法(标准型)：一种是访问者按事先拟好的访问大纲，对所有被访者进行相同的询问，然后将被访者的回答，填到事先制好的表格中去。另一种是将问题与可能的答案印在问卷上，由被访问者自由选择答案。2)半结构（半标准）型访问法，此方法只是将要问的有关问题交给访问者，但无一定的问题顺序，这种方法访问时比较方便，被试易于合作。3)非结构型访问法，此方法是指事先不预定表格，也不按固定的问题顺序去问，自由的交谈，适合于探索性研究。引导式访问；谈话式；非引导式访问法,3、访谈的实施与访谈技巧,1)访谈的开始阶段2)提问(访谈中主要的活动)3)追问4)听与回应5)记录6)访谈的结束7)访问结果的整理与分析,4）听与回应,听的态度：第一种，主观判断式的听，即访谈者把受访者的回答内容，按照自己的观念、价值观、思维习惯等去理解，用自己的观念体系理解对方的话，迅速做出自己的判断。第二种，客观接受式的听，即访谈者尽量把自己的观念暂时存放起来（“悬置”），客观地接受被访者的话，尤其重视被访者自己使用的一些独特的概念（“本土概念”），尽可能理解其真实的意义。第三种，意义建构式的听，即访谈者在倾听的同时，积极地与对方对话，与对方共同建构事物、概念等的意义。回应的方式：第一，呼应。包括语言上的呼应和非言语的呼应。第二，重复、重组和总结。第三，自诉。指访谈者在受访者的话能够引起自己的共鸣的时候，适当地诉说自己的相关情况和自己的感受、体验。第四，适度的积极性评价。,5)记录,访谈记录根据访谈的类型可以分两种：对结构型访谈，由于事先设计有封闭型问题和准确的记录方式，因此，只需根据受访者的回答，在问卷的相应位置做相应的标记即可。这种记录也主要是用来进行定量处理的。对于半结构型和无结构型访谈，则要求访谈者做较多的记录。这种记录可以采用两种形式。一是用笔记录，一是用录音机或者采访机记录声音。现场记录内容可分四个方面：内容性记录；观察性记录；方法性记录；内省性记录。,6)访谈的结束,访谈结束的技巧有：第一，注意提问的方式，比如“我想再问您最后一个问题，就是”，“您还有什么要说的？”以此表示访谈将要结束。第二，直接说明访谈的结束，比如“今天我们就谈这些。”第三，结束中最重要的是表示感谢。第四，就后续的联系作好交代。,(三)问卷法,1.问卷法的特点、意义：“问卷”(Questionnaire)，是指研究者将其所要研究的事项，制成问题或表式，而以邮寄的方式寄给有关的人员，请其照式填答寄回的一种形式，均称为问卷。问卷法是研究者用来收集资料的一种技术，它的性质重在对个人意见、态度和兴趣的调查。问卷的目的，主要是在经由填答者之填写问卷后，从而得知有关被测者对某项问题的态度、意见，然后比较、分析大多数人对该项问题的看法，以作为研究者参考。在心理与教育方面，很多问题无法直接测量，只能通过问卷的方法进行间接测量。,2.问卷法的优点与缺点,1)优点：收集资料可不受人数限制，抽样范围较广。经济且易行，只需印刷费、邮费，所费不多。被调查者有充分考虑的时间，不受别人干扰，并自由地表示意见，其结果将更为可靠所拟问题可尽量求其细密，凡在访问时不能直问，或问而不易得到真确回答的事项，皆可在问卷上得到较为满意与可靠的答案。,2.问卷法的优点与缺点,2)问卷法的缺点：(1)若问题含糊不清，便不能得到确实的回答。(2)所选样本，若不能代表某种团体的意见，其结果将不可靠，亦即要注意样本的代表性。而问卷法由于问卷的回收率较低，使样本的代表性难于保证。(3)问题太多会令填答者生厌，故而置之不理，若问题太少，却又无法达到研究的目的。(4)问题设计的不理想时，会散漫零乱，不易整理，且难以应用统计方法分析和对结果进行科学解释。(5)当填答者不合作、言不由衷时，所得结果会不可靠。(6)有些事情非常复杂，不能用问卷的简单问答所能表明。,3.问卷法的类型,1.无结构型问卷:结构较松懈或较少，这种形式的问卷多半用在探索性研究中。一般被访问的人数较少，不用将资料量化，必须向有关人士问差不多相同的问题。对于被访问的人来说，可以与其他被访问的人回答相同，也可以完全不相同，回答格式自由。2.结构型问卷:又称封闭式问卷，是对所有被测者应用一致的题目，对回答有一定结构限制的问卷类型。根据答案的不同形式还可划分为：(1)选择式;(2)排列式;(3)尺度式，尺度式问卷的尺度，常用3-11之间的奇数系列表示，一般量尺范围不超过16，有实验证明，大于16时，人类被试的判断，难以等距。尺度在72之间最好。,4.问卷的编制,编制问卷的步骤：1.确定研究目的，提出研究假设2.了解研究问题的特质3.确定行为样本(问题样本)4.了解施测对象的特征及选择被试样本5.选择并决定问卷形式6.拟定问题的题目并随时修改7.预试8.编辑问卷和实施说明9.确定除问卷法之外进行研究的其他辅助方法。,5.问卷题目的编写规则,1)问卷内容:一般包括如下两个部分：一是事实问题，二是态度问题。问卷内容应注意的问题：题目的类型是否正确而合适。题目是否切合研究假设的需要。题目是否含混不清，引起歧义。题目是否涉及社会禁忌与爱好。要避免或减少社会称许性。题目是否产生暗示作用。g题目是否超出受测的知识和能力。,5.问卷题目的编写规则,2)用语方面:语文方面:a.语文应浅显、易懂。b.字句的意义力求清楚明白，不要含混或暧昧。c.一句话代表一个单一事物。d.要用标准的语文叙述或描述，把概念、范围界定清楚。情绪方面:a避免主观及情绪化的字句。b避免不受欢迎或涉及隐私的问题。c避免难于回答的问题.理解:a在能懂得的范围内提出问题。b题目不能引起歧义。c尽量使用肯定的叙述。d不用或少用假设语句或猜测语句。,5.问卷题目的编写规则,3)问卷的编辑在结构方面应注意问题的顺序、性质等，在形式方面应注意问题的圈选、安排方式等。问卷的顺序:类别顺序:就整份问卷而言，必然包含好几项，最通常可以分为三类：一类是所谓基本资料；二类是行为资料；三类是态度资料。问卷的施测时间:一般情况下，问卷的长度应控制到30-40分钟的回答时间。问卷的开头谢语及施测说明。,6、发放分发问卷,注意邮寄对象-样本的代表性.邮寄问卷的好处:A.邮寄问卷可以节省经费。B.容易做大地区的抽样。C.样本大，效度增加。D.受测者可以自由填写。E.不受访员的影响，又可以避免找不到人。F.个人隐私不致为人知道，说假话的程度可以减少。邮寄问卷的不足：A.回收率低。B.问卷寄还后，不论发现什么地方错了，或误解了原意，均无法补充。C.受测者填问卷时，可能通篇看过后再答，也可能受了亲友的影响。D.受测者乱填，造成问卷的失真或报废。E.收回的某些问卷有时候是别人代填的。,7、问卷结果的整理分析与解释,问卷的整理:(1)挑出不合乎要求的问卷。(2)按所选统计方法的要求登录分数或次数。问卷结果的解释:主要是看这些结果是否验证了某些假设，如果没有，可能还要提出一些新的假设或新的研究课题。不能简单地依据统计分析的结论而做出研究结论，需要一定的教育理论，心理学理论等为依据。,(四)文献法,文献法主要指搜集、鉴别、整理文献，并通过对文献的研究，形成对事实科学认识的方法。文献：是指“已发表过的、或虽未发表但已被整理、报道过的那些记录有知识的一切载体”。“一切载体”，不仅包括图书、期刊、学位论文、科学报告、档案等常见的纸面印刷品，也包括有实物形态在内的各种材料。教育研究文献的分类：按其性质、内容加工方式、用途大致可分为零次文献、一次文献、二次文献和三次文献。,（1）零次文献，即曾经历过特别事件或行为的人撰写的目击描述或使用其他方式的实况纪录，是未经发表和有意识处理的最原始的资料（primarydocuments），包括未发表付印的书信、手稿、草稿和各种原始纪录。（2）一次文献，也称原始文献，一般指直接记录事件经过、研究成果、新知识、新技术的专著、论文、调查报告等文献。（3）二次文献，又称检索性文献，是指对一次文献进行加工整理，包括著录其文献特征、摘录其内容要点，并按照一定方法编排成系统的便于查找的文献。（4）三次文献，也称参考性文献，是在利用二次文献