教育测量的种类与质量

第十一章测量的种类及其质量分析第一节教育测量的种类根据测量的目标分类：智力测量、成绩测量、品德状况测量、人格特征测量、能力倾向测量。根据测量的方式分类：个别测量、团体测量根据测量的材料分：文字测量和非文字测量根据测量的来源分：标准化测量、教师自编测量根据参照标准分：常模参照测量、标准参照测量第二节测量的信度一、信度的概念信度是指测验结果的一直性或可靠性的程度信度可以理解为：（一）实测值和真值相差的程度

X=T+E(二）两次重复测量或等值测量之间的关联程度二、信度的估计方法（一）稳定性系数（重测信度）指用同一试卷对相同被试者在不同时间测验两次的实得分数的相关系数例：用某量表测验１０个学生，得分记为Ｘ。为了考察测量结果的可靠性，于１５天后用原量表对这１０个学生重测一次，得分记为Ｙ。问测验结果是否可靠？（二）等值性系数（复本信度）等值性系数是估计测验间跨形式的一致性指标，是以两个等值（题型、题数、难度、区分度相同）但具体内容不同的量表，在最短时间内，对相同应试者先后施测两次测验所获得的两组对应分数的相关系数。（三）内部一致性系数（同质性信度）是估计测验内部跨测题的一致性指标，是同一测验试卷的两个部分得分的相关系数计算方法有两种：１.分半信度是把一次测验按题目番号分为两半，一半是奇数题，一半是偶数题，计算两部分的相关系数，最后用斯皮尔曼－布朗公式校正２.库德尔－理查查森公式法（１）rKR20的用法：这个个公式以每题题能正确回答答的人数占总总人数的百分分数为基础计计算rKR20为整个测验结果果的信度系数数，Ｋ为测验验题目数，ＰＰ为各题正确确反应人数占占总人数的百百分数；Ｑ为为个题错误反反应人数占占占总人数的百百分数，Ｓ２为应试者总分分的方差例：有一种包包含６个问题题的测验，１１０个应试者者得分如下，，试估计应试试者反应的一一致性程度计算内部一致致性系数要注注意的问题：：（1）若用分半法法时，以按奇奇数题和偶数数题分为两半半为宜。（2）若速率是测测验的重要因因素，则不宜宜用分半法。。（3）若答案多种种，得分多样样，不宜用上上边的公式计计算。3、论文式测验验的信度系数数4、评分者信度度计算方法肯德尔和谐系系数公式为：三、影响信度度的因素（一）测验的的长度一般来说，测测验越长，信信度值越高。。这是因为：：①测验加长，，可能改进项项目取样的代代表性，从而而能更好地反反映受测者的的真实水平；；②测验的项目目越多，在每每个项目上的的随机误差就就可以互相抵抵消。（三）测验的的难度测验的难度与与信度没有直直接对应关系系，但是当测测验太难或太太易时，则分分数的范围就就会缩小，从从而降低信度度。（三）测验内内容的同质性性（四）被试者者差异（五）评分的的客观性四、提高测验验信度的方法法1.适当增加测验验题目的数量量2.测验的难度要要适中3.测验的内容要要尽量同质4.测验的程序应应统一5.测验的时间要要充分6.评分要客观第三节效效度一、效度的概概念效度是量表能能实际测量出出其所要测量量的特性或功功能的程度。。效度可从以下下几方面理解解：第一，测量的的效度始终是是对一定的测测量目的而言言的。第二，测量的的效度是对测测量结果而言言的第三，测量的的效度只是高高低问题第四，在教育育测量中，测测量效度显得得更为重要信度和效度的的关系:信度是效度的的必要非充分分条件一个测验的效效度不会超过过它的信度的的平方根二、效度的类类别和估计方方法效度的种类内容效度结构效度效标关联效度测验题目样本本对于应测内内容与行为领领域的代表性性程度侧重于测验题题目取样的代代表性，考查查这些题目对对所欲测量的的内容和行为为反应测量的的有效程度结构：心理理学或社会会学上的一一种理论构构想或特质质侧重于一个个测验能够够测量到心心理学和教教学理论上上的抽象概概念或特质质的程度效标：检验验测验效度度的参照标标准，实际际上是本测测验所想测测量或要预预测的特性性或功能测验分数与与作为效标标的另一独独立测验结结果之间的的一致性程程度（一）内容容效度的概概念和估计计方法1.内容效度的的概念测验试题对对欲测验内内容或行为为目标的代代表性程度度2.内容效度的的验证方法法逻辑分析法法统计分析法法（定量的的方法）逻辑分析法法（定性的的方法）依靠有关专专家对测验验题目与应应测内容范范围的吻合合程度作出出判断对每一道题题目逐一进进行审查，，以此形成成“题目双双向细目表表”与“命题双双向细目表表”加以对对照，以确确定试卷的的效度统计分析法法（定量的的方法）克龙巴赫法法（两套测测验试题，，对相同被被试实施测测试后，计计算得分的的相关系数数）评分一致性性考查法（（不同评分分者之间评评分的一致致性程度，，即考查评评分者信度度）前后测对比比法（根据据前后两次次测验的差差异显著性性，确定测测验的内容容效度）（二）、构构想效度及及其验证方方法1.结构效度的的概念测验对于人人的假设属属性或理论论概念测量量到的程度度这些假设属属性或理论论概念是决决定人们外外部行为的的内隐或潜潜在的特性性2.结构效度的的建立过程程①对所欲测量量的属性根根据某种理理论提出假假定的结构构②根据假定的的结构拟定定测试题，，编制测验验③寻求测验分分数与其它它评定之间间的关系④以测验结果果为根据来来验证假设设结构中的的各种因素素是否成立立，验证的的方法可以以从差异性性上寻求证证据⑤将与假设结结构相违背背的测试题题删去，对对测验进行行修改之后后，再重新新实施第③和第④个个步骤结构效度建建立的示例例建立理论框框架从理论框架架出发，提提出各种假假设根据假设编编制测验以逻辑及实实证的方法法，检验结结果是否符符合心理学学的理论框框架及其假假设比如：中学学生数学能能力的研究究数学能力由由分析能力力、综合能能力、归纳纳和演绎能能力、运算算能力、空空间想象能能力构成；；数学能力力与早期教教育有关；；数学能力力与智力正正相关。编制测验，，施测并收收集测验结结果分析测验结结果，考查查测试的结结构效度，，考查测验验结果是否否支持理论论构想（三）、效效标关联效效度及其验验证方法1.效标关联效效度的验证证方法效标关联效效度是指测测验分数与与作为效标标的另一独独立测验结结果之间的的一致性程程度，即推推断某测验验所得分数数与同类标标准测验所所得分数的的相关程度度。效标关联效效度（criterion-relatedvalidity）的验证方方法是指一一个测验对对于处于特特定情境中中的个体行行为进行预预测时的有有效性。效标：检验测验验效度的外外在的、客客观的标准准，即效度度的标准.效标是足以以显示测验验所欲测量量的或要要测量的特特性的变量量。分类：同时效度：测验分数数与效标资资料的取得得约在同一一时间内连连续完成，，这两种资资料的相关关系数即为为同时效度度预测效度：在测验分分数取得一一段时间后后，才获得得效标资料料,计算这两种种资料间的的相关系数数即代表测测验的预测测效度。效标关联效效度的估计计方法相关法直接计算测测验分数与与效标分数数的相关系系数积差相关、、等级相关关、二列相相关等显著差异法法根据效标测测量将被试试分为两个个极端组，，检验这两两个组测验验分数是否否具有统计计学上的差差异显著性性命中率当测验用作作取舍决策策时，常使使用命中率率相关概念：：总命中率率、正命中中率、负命命中率总命中率高高，则测试试的效度高高例：70人参加的考考试，通过过测验选取取了50人，淘汰了了20人；选出的的人中有40人合格，淘淘汰的人中中有8人不合格。。该测验的的总命中率率、正命中中率和负命命中率分别别是多少？？第四节项项目的难难度一、难度的的含义难度是指测测验项目的的难易程度度刻画被试作作答一个题题目所遇到到的困难程程度的量数数，叫做题题目的难度度系数，用用符号P表示在教育测量量中，P＝正确回答答试题的人人数R/参加测验的的总人数N二、难度的的计算客观试题（（二分法记记分）：P＝R/NR：答对该题题的人数；；N：参加测验验的总人数数主观题难度度计算P=XK教育测量与与评价中题题目（项目目）的难度度二、难度的的计算客观题的极极端分组法法根据测验分分数按高低低排序，用用两个极端端组（高分分、低分））在某项目目上的平均均通过率表表示项目的的难度步骤：按测验总分分由高到低低排序从高分段向向下选出全全部试卷的的27％作为高分分组从低分段向向上选出全全部试卷的的27％作为低分分组按照上述公公式计算项项目难度值值例：100人参加某测测验，高分分组与低分分组各取27人，其中第第一题高分分组20人答对，低低分组10人答对。这这道题的难难度系数是是多少？教育测量与与评价中题题目（项目目）的难度度二、难度的的计算主观题的极极端分组法法公式：步骤按测验总分分依次排序序，确定比比例各为25％的高分组组和低分组组为高分组、、低分组分分别编制每每题得分的的分析表（（试题分析表表）用上述难度度公式计算算难度值教育测量与与评价中题题目（项目目）的难度度公式式的的含含义义：：XH：高高分分组组所所得得总总分分；；XL：低低分分组组所所得得总总分分；；H：该该题题最最高高分分；；L：该该题题最最低低分分；；N：考考生生总总人人数数的的25％41040400521051578567642854088641000低分组1010100高分组XffxXffx试题分析表例：：100名学学生生参参加加论论文文式式测测验验，，按按高高、、低低分分各各占占总总人人数数的的25％分分组组，，其其中中第第6题的的得得分分统统计计表表如如下下所所示示。。求求该该题题目目的的难难度度。。教育育测测量量与与评评价价中中题题目目（（项项目目））的的难难度度难度度指指出出的的仅仅仅仅是是题题目目的的相相对对难难度度，，不不能能客客观观地地指指出出题题目目难难度度之之间间差差异异大大小小一般般情情况况下下，，测测验验分分数数呈呈正正态态分分布布教育育测测量量与与评评价价中中题题目目（（项项目目））的的难难度度三、、难难度度对对测测验验的的影影响响难度度对对测测验验分分数数分分布布的的影影响响过易易、、过过难难会会造造成成测测验验分分数数偏偏离离正正态态分分布布，，使使测测验验分分数数离离散散程程度度变变小小难度度对对测测验验鉴鉴别别力力的的影影响响测验验的的主主要要功功效效是是鉴鉴别别考考生生实实际际水水平平的的高高低低适宜宜难难度度可可以以加加大大考考生生得得分分的的差差异异，，从从而而提提高高测测验验的的鉴鉴别别力力项目目难难度度的的适适宜宜值值为为0.5左右右时时，，测测验验得得分分的的方方差差才才可可达达最最大大值值难度度与与测测验验目目的的的的关关系系项目目难难度度应应根根据据测测验验目目的的来来确确定定常模模参参照照评评价价：：区区分分学学生生能能力力或或成成就就的的高高低低标准准参参照照评评价价：：了了解解学学生生达达到到教教学学目目标标规规定定的的掌掌握握程程度度教育育测测量量与与评评价价中中题题目目（（项项目目））的的区区分分度度一、、区区分分度度的的概概念念区分分度度是是测测验验对对被被试试实实际际水水平平的的区区分分程程度度通常常用用D表示示，，取取值值范范围围为为＋＋1.00至－－1.00D越高高时时，，试试题题的的质质量量越越好好D为正正时时，，试试题题积积极极区区分分D为负负时时，，试试题题消消极极区区分分教育育测测量量与与评评价价中中题题目目（（项项目目））的的区区分分度度二、、区区分分度度计计算算方方法法极端端分分组组法法客观观性性试试题题区区分分度度的的计计算算公公式式：：D＝PH－PL按测测验验总总分分从从高高到到低低排排序序确定定测测验验总总分分最最高高的的27％的被被试作作为高高分组组，最最低的的27％的被被试为为低分分组分别求求出这这两组组被试试通过过试题题的百百分比比将算得得的有有关数数据带带入上上公式式主观性性试题题区分分度的的计算算公式式：说明：：XH：高分分组所所得总总分；；XL：低分分组所所得总总分；；H：该题题最高高分；；L：该题题最低低分；；N：考生生人数数（总总人数数的25％）步骤：：按测验验总分分由高高到低低排序序；分分别确确定测测验总总分的的25％、25％作为为高低低分组组；列列出试试题分分析表表；将将数据据带入入以上上公式式加以以计算算教育测测量与与评价价中题题目（（项目目）的的区分分度例：100名考生生参加加主观观性试试题测测验，，按高高、低低分各各占人人数的的25％分组组，其其中第第四题题试题题分析析表如如下所所示，，求该该题目目的区区分度度。41040428653063188648843210440106601200低分组1210120高分组XffxXffx试题分析表教育测测量与与评价价中题题目（（项目目）的的区分分度三、区区分度度计算算方法法相关法法考虑中中间数数据以项目目分数数与效效标分分数的的相关关作为为项目目区分分度的的指标标（效标标分数数不易易得到到时，，以测测验总总分代代替））相关越越高，，区分分能力力越好好具体方方法：：积差相相关法法点二列列相关关二列相相关Φ相关积差相相关法法计算算区分分度非二分分法记记分的的项目目，可可将题题目得得分与与测验验总分分求积积差相相关系系数以以得到到题目目的区区分度度积差相相关的的另一一计算算公式式：Sx为全体体被试试在某某道题题目上上得分分的标标准差差；Sy为全体体被试试总分分的标标准差差；SD是由被被试总总分减减去某某题目目得分分而得得到的的新变变量的的方差差点二列列相关关计算算区分分度测验的的一个个变量量是连连续变变量，，另一一个变变量是是二分分变量量时，，要用用点二二列相相关系系数表表示某某项目目的区区分度度公式的的说明明：p为答对对某题题人数数占全全体人人数的的比例例q为答错错此题题人数数所占占全体体人数数的比比例（q＝1-p）St为全体体考生生的标标准差差生1234567891011121314151617181920总8652947265227683807576736291477481886258题1001100111101101100020个学生生参加加语文文测验验，总总分与与某一一个选选择题题的得得分情情况如如下表表。计计算该该选择择题的的区分分度。。二列相相关计计算区区分度度测验总总分与与项目目分数数均为为连续续变量量，其其中一一个被人为为地分分成两两个类类别，公式的的说明明：p为二分分变量量中某某一类类别在在全部部变量量中所所占的的比例例，q为另一一类别别所占占的比比例（（q＝1-p）St为全部部连续续变量量的标标准差差Y表示正正态曲曲线下下与P相对应应的纵纵线高高度。。生1234567891011121314151617181920总8652947265227683807576736291477481