目标参照测验PPT课件

.1，第七章目标参照考试，第一节目标参照考试的概要第二节目标参照考试的项目分析第三节目标参照考试的可信度和效力第四节考试分数的解释，2，第一节目标参照考试的概要，第一，目标参照考试发生20世纪初期，由于需要说明考试的原始分数的意义， 西方早期心理和教育测量学专家提出了相对能力的测定，发展的考试模式是常规参照考试，随之发展了常规参照考试项目的分析、可信度分析和分数解释的方法。 在20世纪中叶，发现了所有的测试并不仅仅关心个体间的差异，而是以了解通过测试内容掌握的绝对水平为目的的测试。3、问题：如何在考试中评价被实验者对教育活动内容的把握度？ 这个测试的目的是，在某个教育领域，确定被实验者是否掌握了该教育领域的知识和技能，在该领域理解被实验者的困难，向目的地附加教育指导和救济。 因为常规参照试验不能解决这个问题，所以产生了目标参照试验。 1962年，戈雷塞、克劳斯首先提出了目标参照试验的概念。4，2，目标参考试验的定义，1971年，戈雷泽明确地定义了目标参考试验：根据某个明确定义的内容范围周密地制定的试验，以及从试验中得到的结果也根据某个明确定义的行为标准直接解释。 “内容范围”:有边界明确的结构(专家评定法)“行为标准”的边界点。5、第二节目标参考的项目分析，第一、内容范围的确定内容范围可以按有界限的内容范围分为几种主要形式：双方内译表、6、第二节目标参考的项目分析、第二、考试项目的内容有效性分析专家评定法、7、第二节目标参考的项目分析、第三、 考试项目难易度和区分度分析考试的预测项目的难易度项目区分度8，1 .考试的预测、前测定后测定方法(同一组被试)是已经接受过教育的一组方法(两组都是接受过教育的被试，教师将掌握组和最后掌握组进行比较)，9，2 .项目难易度，标准的高低掌握组-未掌握组识别指数d相关系数、11、(1)个人获得指数、D=Ppost-PpreD=个人获得指数Ppost=事后测定中(接受过教育的组)的通过率Ppre=预测中(未接受过教育的组)的通过率问题：练习效果d值低，教育不好吗？12、(2)鉴别度指数、B=U/n1-L/n2B :某个测定问题的达成分数线为某一定值时的区分能力u :作为把握组的问题正确答案的人数n1 :作为把握组的人数l :作为没有把握组的问题正确答案的人数n2 :没有把握组的人数问题：具体(3)求出相关系数，求出项目得分和测试总分的一致度，计算方法参照正常模式和测试。 指标： -1，1 ，该值为负值时，必须检查主题的问题点，修正或删除该值为正值时，越接近1，主题越有效该值为0时，主题没有区别力，一般不能保持。 注意：在单纯的目标参照测试中，必须根据主题测定的内容范围的特殊性来决定取舍。14、第三节目标参考的信度和有效度、信度估计有效度估计、15，1 .信度估计、分类一致信度方差分析方法、16、(1)分类一致信度、目标参考总是按某个分数分界点分为被试和未掌握者。 常用的估计方法是检查在同一测试的两次测试或两次副本的测试中是否属于同一类。 (再测定法和复制法)一般来说，把同一被实验者组在2次试验结果中被分类为合格或不合格的人数的比例作为分类一致度的指标。(17 )分类一致度的计算：测试a，合格，不合格，a，b，c，d，不合格，测试，b，图所示，测试的分类一致度是2次实施中合格和不合格的人数占合计人数的比例，p=(a d)/N，18， 例如，80个组在某个测试的两次实施中41人合格，21人不合格的话，该测试的分类一致度是多少(41 21)/800.77问题：1，分类一致度的最大值是？ 2、分类一贯性的信赖度受到什么样的因素的影响？ (19 )方差分析法利用方差分析的方法，找出个体水平真正变异在总变异中的比例。 由于计算公式和常规参考测试的可信度计算(p53，4.14 )，20，2 .有效性估计，内容有效性指标相关有效性，21，(1)内容有效性是非常重要的，因为它考虑到目标参考测试主要测量的内容范围内的掌握度。 评价测试的内容有效度根据有明确定义的内容范围测试的每个主题的内容有效度的分析、22、(2)效果指标相关有效度、目标参照测试中经常使用的“决定有效度”来评价。 “决策有效性”是指在预测源测试和有效性测试中都通过的被实验者的比例。 例如：根据预测源测试将被测试者分成掌握组(a，30人)和未掌握组(b，15人)的后续的基准测试中，a组为25人，b组为10人的情况下，该测试的基准关联的有效性是多少？25/45/10 第四节的测试分数界点的确定，专家判定法效果组预测法，24，一，专家判定法，1，Nedelsky法对于主要由多选题组成的测试，专家判定处于临界水平的被试验者可以对每个问题排除的错误选项，计算正确的可能性，每个问题/一个测试由四个选择一个问题构成，在一个问题a、b、c、d四个答案中，a是正确的，专家判断处于临界水平的被试验者能正确排除b和d的话，在这个问题上正确回答的可能性就为1/(4-2)=0.5。 最后把所有问题加起来，就能得到及格线。25、2、Angoff方法是专家直接判断处于临界水平的受试者对某个测试的所有问题正确答案的可能性(Pi )，如果每个问题的满分为Fi，则该测试的分数边界点()为=FiPi，26，2，效果组预测法，1， 临界组法是专家判断和选择处于临界水平的受试者，对该组实施测试，计算他们在测试中的平均成绩，反映测试内容范围要求的临界水平，注：这种方法的困难是选择和评定临界水平的受试者。27、2、对照组法首先用专家评定的方法确定2组被试验者，一组被明确地判定为把握组，另一组被明确地判定为未把握组，难以被判定为“把握”或“未把握”的被试验者全部除外。 对这两组被实验者实施测试，得到两组被实验者的原始得分分布图，分布图中的两个分布曲线的边界点是测试得分的边界点。 在本章的总结中，目标参照测试是基于某一明确定义的内容范围而细致地作成的测试，另外，被试验者在测试中得到的结果也是基于某一明确定义的行为标准而直接解释的。 目标参照测试的3种预测方法(前后测定法)接受对照组法-不接受分组法)。 测试项目