第十一章教育测量的质量指标xinppt课件

1、第十一章 丈量的种类及其质量分析.第一节 教育丈量的种类根据丈量的目的分类：智力丈量、成果丈量、品德情况丈量、人格特征丈量、才干倾向丈量。根据丈量的方式分类：个别丈量、团体丈量根据丈量的资料分：文字丈量和非文字丈量根据丈量的来源分：规范化丈量、教师自编丈量根据参照规范分：常模参照丈量、规范参照丈量.第二节 丈量的信度一、信度的概念信度是指检验结果的不断性或可靠性的程度信度可以了解为：一实测值和真值相差的程度 X=T+E (二两次反复丈量或等值丈量之间的关联程度.二、信度的估计方法一稳定性系数重测信度指用同一试卷对一样被试者在不同时间检验两次的实得分数的相关系数例：用某量表检验个学生，得分记为。

2、为了调查丈量结果的可靠性，于天后用原量表对这个学生重测一次，得分记为。问检验结果能否可靠？.二等值性系数复本信度 等值性系数是估计检验间跨方式的一致性目的，是以两个等值题型、题数、难度、区分度一样但详细内容不同的量表，在最短时间内，对一样应试者先后施测两次检验所获得的两组对应分数的相关系数。.三内部一致性系数同质性信度是估计检验内部跨测题的一致性目的，是同一检验试卷的两个部分得分的相关系数计算方法有两种：.分半信度是把一次检验按标题番号分为两半，一半是奇数题，一半是偶数题，计算两部分的相关系数，最后用斯皮尔曼布朗公式校正.库德尔理查森公式法rKR20的用法：这个公式以每题能正确回答的人数占总人

3、数的百分数为根底计算rKR20为整个检验结果的信度系数，为检验标题数，为各题正确反响人数占总人数的百分数；为个题错误反响人数占占总人数的百分数，为应试者总分的方差例：有一种包含个问题的检验，个应试者得分如下，试估计应试者反响的一致性程度.计算内部一致性系数要留意的问题：1假设用分半法时，以按奇数题和偶数题分为两半为宜。2假设速率是检验的重要要素，那么不宜用分半法。3假设答案多种，得分多样，不宜用上边的公式计算。.3、论文式检验的信度系数.4、评分者信度计算方法肯德尔调和系数公式为：.三、影响信度的要素一检验的长度 普通来说，检验越长，信度值越高。这是由于： 检验加长，能够改良工程取样的代表性，

4、从而能更好地反映受测者的真实程度； 检验的工程越多，在每个工程上的随机误差就可以相互抵消。 三检验的难度 检验的难度与信度没有直接对应关系，但是当检验太难或太易时，那么分数的范围就会减少，从而降低信度。.三检验内容的同质性四被试者差别五评分的客观性.四、提高检验信度的方法1.适当添加检验标题的数量2.检验的难度要适中3.检验的内容要尽量同质4.检验的程序应一致5.检验的时间要充分6.评分要客观.第三节 效度一、效度的概念效度是量表能实践丈量出其所要丈量的特性或功能的程度。效度可从以下几方面了解：第一，丈量的效度一直是对一定的丈量目的而言的。第二，丈量的效度是对丈量结果而言的第三，丈量的效度只是

5、高低问题第四，在教育丈量中，丈量效度显得更为重要.信度和效度的关系:信度是效度的必要非充分条件一个检验的效度不会超越它的信度的平方根.二、效度的类别和估计方法效度的种类内容效度构造效度效标关联效度检验标题样本对于应测内容与行为领域的代表性程度偏重于检验标题取样的代表性，调查这些标题对所欲丈量的内容和行为反响丈量的有效程度构造：心思学或社会学上的一种实际想象或特质偏重于一个检验可以丈量到心思学和教学实际上的笼统概念或特质的程度效标：检验检验效度的参照规范，实践上是本检验所想丈量或要预测的特性或功能检验分数与作为效标的另一独立检验结果之间的一致性程度.一内容效度的概念和估计方法1.内容效度的概念检

6、验试题对欲检验内容或行为目的的代表性程度2.内容效度的验证方法逻辑分析法统计分析法定量的方法.逻辑分析法定性的方法依托有关专家对检验标题与应测内容范围的吻合程度作出判别对每一道标题逐一进展审查，以此构成“标题双向细目表与“命题双向细目表加以对照，以确定试卷的效度.统计分析法定量的方法克龙巴赫法两套检验试题，对一样被试实施测试后，计算得分的相关系数评分一致性调查法不同评分者之间评分的一致性程度，即调查评分者信度前后测对比法根据前后两次检验的差别显著性，确定检验的内容效度.二、想象效度及其验证方法1.构造效度的概念检验对于人的假设属性或实际概念丈量到的程度这些假设属性或实际概念是决议人们外部行为的

7、内隐或潜在的特性.2.构造效度的建立过程 对所欲丈量的属性根据某种实际提出假定的构造 根据假定的构造拟定测试题，编制检验 寻求检验分数与其它评定之间的关系 以检验结果为根据来验证假设构造中的各种要素能否成立，验证的方法可以从差别性上寻求证据 将与假设构造相违背的测试题删去，对检验进展修正之后，再重新实施第和第个步骤.构造效度建立的例如建立实际框架从实际框架出发，提出各种假设根据假设编制检验以逻辑及实证的方法，检验结果能否符合心思学的实际框架及其假设比如：中学生数学才干的研讨数学才干由分析才干、综合才干、归纳和演绎才干、运算才干、空间想象才干构成；数学才干与早期教育有关；数学才干与智力正相关。编

8、制检验，施测并搜集检验结果分析检验结果，调查测试的构造效度，调查检验结果能否支持实际想象.三、效标关联效度及其验证方法1.效标关联效度的验证方法效标关联效度是指检验分数与作为效标的另一独立检验结果之间的一致性程度，即推断某检验所得分数与同类规范检验所得分数的相关程度。效标关联效度criterion-related validity的验证方法是指一个检验对于处于特定情境中的个体行为进展预测时的有效性。.效标：检验检验效度的外在的、客观的规范，即效度的规范.效标是足以显示检验所欲丈量的或 要丈量的特性的变量。.分类：同时效度：检验分数与效标资料的获得约在同一时间内延续完成，这两种资料的相关系数即为

9、同时效度预测效度：在检验分数获得一段时间后，才获得效标资料,计算这两种资料间的相关系数即代表检验的预测效度。.效标关联效度的估计方法相关法直接计算检验分数与效标分数的相关系数积差相关、等级相关、二列相关等显著差别法根据效标丈量将被试分为两个极端组，检验这两个组检验分数能否具有统计学上的差别显著性命中率当检验用作取舍决策时，常运用命中率相关概念：总命中率、正命中率、负命中率总命中率高，那么测试的效度高例：70人参与的考试，经过检验选取了50人，淘汰了20人；选出的人中有40人合格，淘汰的人中有8人不合格。该检验的总命中率、正命中率和负命中率分别是多少？.第四节 工程的难度一、难度的含义难度是指检

10、验工程的难易程度描写被试作答一个标题所遇到的困难程度的量数，叫做标题的难度系数，用符号 P表示在教育丈量中，P正确回答试题的人数R/参与检验的总人数N二、难度的计算客观试题二分法记分：PR/N R：答对该题的人数；N：参与检验的总人数客观题难度计算P=XK.教育丈量与评价中标题工程的难度二、难度的计算客观题的极端分组法根据检验分数按高低排序，用两个极端组高分、低分在某工程上的平均经过率表示工程的难度步骤：按检验总分由高到低排序从高分段向下选出全部试卷的27作为高分组从低分段向上选出全部试卷的27作为低分组按照上述公式计算工程难度值例：100人参与某检验，高分组与低分组各取27人，其中第一题高分

11、组20人答对，低分组10人答对。这道题的难度系数是多少？.教育丈量与评价中标题工程的难度二、难度的计算客观题的极端分组法公式：步骤按检验总分依次排序，确定比例各为25的高分组和低分组为高分组、低分组分别编制每题得分的分析表试题分析表用上述难度公式计算难度值.教育丈量与评价中标题工程的难度公式的含义：XH：高分组所得总分；XL：低分组所得总分；H：该题最高分；L：该题最低分；N：考生总人数的254 10 404 0 0 5 2 105 1 57 8 567 6 42 8 5 408 8 6410 0 0低分组10 10 100高分组X f fx X f fx试题分析表例：100名学生参与论文式检

12、验，按高、低分各占总人数的25分组，其中第6题的得分统计表如下所示。求该标题的难度。.教育丈量与评价中标题工程的难度难度指出的仅仅是标题的相对难度，不能客观地指出标题难度之间差别大小普通情况下，检验分数呈正态分布.教育丈量与评价中标题工程的难度三、难度对检验的影响难度对检验分数分布的影响过易、过难会呵斥检验分数偏离正态分布，使检验分数离散程度变小难度对检验鉴别力的影响检验的主要效果是鉴别考生实践程度的高低适宜难度可以加大考生得分的差别，从而提高检验的鉴别力工程难度的适宜值为0.5左右时，检验得分的方差才可达最大值难度与检验目的的关系工程难度应根据检验目的来确定常模参照评价：区分学生才干或成就的

13、高低规范参照评价：了解学生到达教学目的规定的掌握程度.教育丈量与评价中标题工程的区分度一、区分度的概念区分度是检验对被试实践程度的区分程度通常用D表示，取值范围为1.00至1.00D越高时，试题的质量越好D为正时，试题积极区分D为负时，试题消极区分.教育丈量与评价中标题工程的区分度二、区分度计算方法极端分组法客观性试题区分度的计算公式： DPHPL按检验总分从高到低排序确定检验总分最高的27的被试作为高分组，最低的27的被试为低分组分别求出这两组被试经过试题的百分比将算得的有关数据带入上公式.客观性试题区分度的计算公式：阐明：XH：高分组所得总分；XL：低分组所得总分；H：该题最高分；L：该题

14、最低分；N：考生人数总人数的25步骤：按检验总分由高到低排序；分别确定检验总分的25、25作为高低分组；列出试题分析表；将数据带入以上公式加以计算.教育丈量与评价中标题工程的区分度例：100名考生参与客观性试题检验，按高、低分各占人数的25分组，其中第四题试题分析表如下所示，求该标题的区分度。4 10 404 2 8 6 5 306 3 188 6 488 4 32 10 4 4010 6 6012 0 0低分组12 10 120高分组X f fx X f fx试题分析表.教育丈量与评价中标题工程的区分度三、区分度计算方法相关法思索中间数据以工程分数与效标分数的相关作为工程区分度的目的效标分数

15、不易得到时，以检验总分替代相关越高，区分才干越好详细方法：积差相关法点二列相关二列相关相关.积差相关法计算区分度非二分法记分的工程，可将标题得分与检验总分求积差相关系数以得到标题的区分度积差相关的另一计算公式：Sx为全体被试在某道标题上得分的规范差；Sy为全体被试总分的规范差；SD是由被试总分减去某标题得分而得到的新变量的方差.点二列相关计算区分度检验的一个变量是延续变量，另一个变量是二分变量时，要用点二列相关系数表示某工程的区分度公式的阐明：p为答对某题人数占全体人数的比例q为答错此题人数所占全体人数的比例q1-pSt为全体考生的规范差生123456789101112131415161718

16、1920总8652947265227683807576736291477481886258题1001100111101101100020个学生参与语文检验，总分与某一个选择题的得分情况如下表。计算该选择题的区分度。.二列相关计算区分度检验总分与工程分数均为延续变量，其中一个被人为地分成两个类别，公式的阐明：p为二分变量中某一类别在全部变量中所占的比例，q为另一类别所占的比例q1-pSt为全部延续变量的规范差Y表示正态曲线下与P相对应的纵线高度。生1234567891011121314151617181920总8652947265227683807576736291477481886258作47

17、37552722103542463940413852213942482927类合合合不不不不合合合合合合合不不合合不不.相关法计算区分度检验的两个变量都是二分变量，可用计算相关系数来表示某工程的区分度以检验总分划分为合格、不合格两类的被试在某一标题上经过、未经过的人数列成四格表来计算另一类数据合计一类数据ABA+BCDC+D合计A+CB+DN.相关法计算区分度例：45名学生考取大学的人数和在某题上经过的人数由下表所示。假设以升学为效标，此题对学生能否有区分才干？205713经过考取未考取未经过检验计算出的r值能否到达显著性程度，还需将r值转换成2值，再进展2检验。.练习：生1234567891011121314151617181920总8690548950444328758260707581708076777950一1101000011011101111020名学生的期末成果如下表，为调查第一题能否有区分才干，将该题用二分法记分，答对记1分，答错记0分。试计算该题的区分度。假设60分以上含60分为晋级，60分以下为留级。试用相关法分析该题的区分