心理测量第6章项目分析.ppt

第六章 项目分析,狭义的项目分析一般是指分析被试对测验项目的反应的统计方法，主要是进行定量分析。 而广义的项目分析一般包括定性分析和定量分析。定性分析又叫质的分析，对内容取样的适当性、题目的思想性以及表达是否清楚等方面加以分析，主要包括内容效度、题目编写的恰当性和有效性等的分析。 定量分析是对预测结果进行统计分析，确定项目的难度、区分度、备选答案的适宜性等。,第一节 项目的难度,一、定义 难度（difficulty），顾名思义，是指项目的难易程度。难度分析主要用于最高作为测验。在典型作为测验中，不存在难易问题，一般称“通俗性”。,P值越大，表示题目越简单；数值大小与实际的含义恰好相反，准确地说，应该叫“易度”。因此有人用未通过率或者答错率（用符号Q来表示）代表难度。 Q=1-P,二、难度的计算方法,（一）二分法记分的项目 高分组总分前27%的人组成的小组 低分组总分最后27%的人组成的小组,（二）非二分记分的项目,难度的校正公式 在是非题或选择题中，由于有猜测的成分，被试的得分可能被夸大，不能真正反映测验的难度，为平衡机遇对难度的影响，可用吉尔福特的公式矫正：,CP为矫正后的通过率 P为实得通过率 K为备选答案数目,三、难度水平的确定 项目的难度 :理论上P值越接近于0.50，区别力越高。 测验的难度,第二节 项目的区分度,一、定义 项目区分度（item discrimination）,也叫鉴别力，是指测验项目对被试的心理特性的区分能力。 二、计算方法 鉴别指数 相关法 1点二列相关 2二列相关 3相关法,1965年，美国测验专家伊贝尔（L.Ebel）根据长期的经验提出用鉴别指数评价项目性能的标准： 表2-2 项目鉴别指数与评价标准,区分度与难度的关系,0.2,0.4,0,0.2,0.4,0.6,0.8,1.0,1.0,0.8,0.6,D,P,四、项目分析的特殊问题,选择反应模式的分析 对于选择题，除了分析其难度和区分度外，还要分析被试对每个备选答案的反应情况。一般主要做以下分析： 如果正确的备选答案被所有被试所选择，说明该题目太容易或者题目中可能提供了某种暗示； 如果所有被试都选择了同一个错误答案，可能是编制测验时把答案定错了，也可能是在教学中发生了错误；,如果某个错误答案没有一个被试选择，说明该选项不具迷惑性，错得过于明显，一般说来，除非有2%以上的人选择，否则这个备选答案就应该修改； 如果高分组被试的选择集中在两个答案上，二者选择几率相近，说明该题可能有两个正确答案或者另一个答案也有道理；,如果高分组对正确答案的选择与低分组相等或者低于后者，说明所考察的东西与水平无关； 如果一个题目被试未答人数过多或者选择各个备选答案人数相等，则说明题目过难或者题意不清，使得被试无法作答或者凭猜测作答。,标准参照测验的项目分析,标准参照测验主要用于判断被试是否掌握了某些知识技能，是否达到了一个事先确定的标准，测验结果只与既定标准比较而不在被试之间作比较。因此，测验分数的变异性不是标准参照测验的必要条件。所以，常模参照测验的项目分析方法不完全适用于标准参照测验。,1.难度分析,由于标准参照测验的目的是为了考察被试对某方面的知识技能的掌握情况，因此，只要能反映教育目标或者教育者认为重要的内容，无论其难度为多少，都可以编入测验。 例如，我们在教学开始之前，为了了解学生的准备状态所进行的前测，多数题目将产生很低的通过率，但这些题目应该保留，因为它们表明了哪些东西需要学习。,在进行了一段教学之后，为了检查学生的掌握情况所进行的后测，即使每个题目都有很高的通过率，这些题目也是可用的，因为它们反映了教学的效果。同一道题在教学前后对学生进行测验，学生的得分如果为FP模式（F为失败，P为通过），则说明教学取得了较好的效果或题目较好；如果为FF模式，说明教学效果太差或者题目太难了；如果为PP模式，说明题目太容易了；如果为PF模式，则说明这个题编制的有问题或者教学上出现了错误。,2.区分度分析,标准参照测验一般分数变异较小，因此不适合用相关法来计算区分度，但是可以采用类似鉴别指数的方法，即比较两组的通过率。,方法一： 根据测验分数将被试分为达标组与未达标组，然后分别计算它们在某一项目上的通过率，两组考生通过率之差，便是该项目的区分度，其公式为： 说明：Ps为达标组在某项目上的通过率 Pn为未达标组在该项目上的通过率,方法二 用同一测验对同一组被试在教学前后各施测一次，分别统计各项目前后测的通过率，二者之差便是项目的区分度。其公式为： 说明：RA为前测通过的人数 RB为后测通过的人数,方法三 取两组条件相近的考生，一组接受过同测验有关的学