信度的估计方法

信度的种类和估计方法 学习目标 1 理解重测信度 复本信度 内部一致性信度以及评分者信度的含义及使用条件 2 了解各种信度指数的计算公式 如上一节所述 一个测验的两个平行形式之间的相关系数就是该测验的信度 实践中我们可以通过构建平行测验来计算测验的信度 从这一结论出发 人们找到了平行测验的各种替代形式 相应地也推导出计算信度系数的替代性方法 与这些替代形式相应的信度分别有 重测信度 复本信度 内部一致性信度 评分者信度 信度的种类 重测信度复本信度内部一致性信度评分者信度 重测信度复本信度内部一致性信度评分者信度 test retestreliability 对同一被试样本在一定时间间隔里用同一量表施测两次所得结果的一致性程度 代表能够将测验分数概括到不同时间的程度 重测信度复本信度内部一致性信度评分者信度 重测信度虽然最为直接地代表了信度的内涵 但并非所有的心理测验都适合计算重测信度 重测信度的误差来源包括 测验本身所测的特性不稳定 被试的成熟 学习 练习和遗忘的效果并非人人等量增长 某次施测时偶发因素 如计时错误 情绪波动 健康状况 动机变化等 重测信度的使用条件 1 所测量的心理特质必须是相对稳定的 2 测量中不能有练习效应和遗忘效应 3 不能存在差别学习的效果 重测信度复本信度内部一致性信度评分者信度 重测信度的使用条件 1 所测量的心理特质必须是相对稳定的 重测信度复本信度内部一致性信度评分者信度 重测信度的使用条件 2 测量中不能有练习效应和遗忘效应 或者练习和遗忘效应基本可以互相抵消 重测信度复本信度内部一致性信度评分者信度 重测信度的使用条件 3 不能存在差别学习的效果 即两次施测期间被试的学习效果没有差别 重测信度复本信度内部一致性信度评分者信度 重测信度的计算公式 皮尔逊积差相关系数 重测信度复本信度内部一致性信度评分者信度 重测信度的计算公式 皮尔逊积差相关系数 10名学生幸福感调查的两次施测分数 重测信度的计算 重测信度复本信度内部一致性信度评分者信度 Alternate formreliability 同一被试样本在同一测验的两种形式上得分的一致性程度 又称等值性信度 代表能够将测验分数概况到不同测验形式的程度 重测信度复本信度内部一致性信度评分者信度 复本信度的误差取决于两种测验形式是不是严格平行测验 或者说是不是严格的等值 测题取样是否匹配 格式是否相同 内容 题数 难度 平均数 标准差是否一致 另外 被试方面情绪波动 动机变化 以及测验情景的变动 偶发因素的干扰都会引起测验误差 复本信度的使用条件 1 施测所用的两个复份必须是真正平行的测验 即A B卷 2 被试要有条件接受两个测验 重测信度复本信度内部一致性信度评分者信度 复本信度的使用条件 1 施测所用的两个复份必须是真正平行的测验 即A B卷 重测信度复本信度内部一致性信度评分者信度 复本信度的使用条件 2 被试要有条件接受两个测验 注意 1 排除施测顺序的影响 2 在报告结果时 应报告两次施测的间隔 及在此间隔内被试的有关经历 重测信度复本信度内部一致性信度评分者信度 复本信度的计算公式 皮尔逊积差相关系数 10名学生创造力的复本测验结果 复本信度的计算 重测信度复本信度内部一致性信度评分者信度 在重测信度和复本信度原理的基础上 把这两种方法加以综合应用就可以产生另外一种信度估计方法 得到再测 复本信度 或者称为稳定 等值信度 stabilityandequivalentreliability 如果两个复本测验是相距较长一段时间分两次施测的 同一组被试施测结果的一致性程度 课前提问 何谓重测信度 要满足那些条件时 使用重测信度才是有意义的 何谓复本信度 使用复本信度的前提有哪些 重测信度复本信度内部一致性信度评分者信度 Internalconsistencyreliability 指的是测验内容的一致性或测验内部所有题目的一致性 项目同质性 程度 又称同质性 homogeneity 信度 主要反映测验或分测验的单维性 当被试在测验中表现出跨项目的一致性时 就称测验具有项目同质性 即各个测题得分为正相关时 即为同质 相关为零时则为异质 重测信度复本信度内部一致性信度评分者信度 注意 1 适用于同质性测验 而不适用于异质性测验 2 不适用速度测验 3 估计内在一致性系数的方法通常有两类 一类是分半法 另外一类方法需要对项目反应的方差或协方差进行分析 重测信度复本信度内部一致性信度评分者信度 分半信度 split halfreliability 是指将一个测验分成对等的两半后 所有被试在这两半上所得分数的一致性程度 常见的分半方法是按测题序号奇偶分半 测验题目按某种顺序 如难度 排列 如果是随机排列的题目 则必须是所有题目是平等的 要么难度相等 要么性质一致 是测同一个心理特质的 如果测验有多个分量表 应在分量表内部排好顺序 再把各分量表的两半组合起来求相关 重测信度复本信度内部一致性信度评分者信度 分半信度 split halfreliability 是指将一个测验分成对等的两半后 所有被试在这两半上所得分数的一致性程度 计算方法 1 确定分半方法2 计算两半相关系数3 利用公式校正 把测验分成两半的方法除了奇偶法之外 还有随机安置法 内容匹配法 难度奇偶排序法等等 每一种划分方法产生的分半信度估计值都有差别 即分半信度估计不具备惟一性 重测信度复本信度内部一致性信度评分者信度 库德 Kuder 理查逊 Richardson 方法 K R20公式 仅适用于以1 0记分 K R21公式 适用于以1 0记分 各题难度近似 或 GO GO 重测信度复本信度内部一致性信度评分者信度 多值记分测验的内部一致性系数计算方式 克伦巴赫 Cronbarch 系数 系数 荷伊特 S Hoyt 信度 重测信度复本信度内部一致性信度评分者信度 scorerreliability 指多个评分者给同一批人的答卷进行评分的一致性程度 两人评分时 积差相关或等级相关 多人评分时 肯德尔和谐系数 如有A B C三位专家给6位应聘者的面试评分 结果如下 试求评分者信度 14 7 13 18 8 3 63 142 72 132 182 82 32 811 由题意知K 3 N 6 将上述值代入公式有 W 0 95如在评定中有相同的等级时 用下式校正 其中n为相同等级的个数 各种信度系数相应误差变异的来源 重测信度复本信度内部一致性信度评分者信度 信度系数与信度指数信度指数 相关系数信度系数 相关系数的平方注意 1 信度系数有多种 2 同一种信度系数也会因样本 测查时间不同而有多个 3 信度系数只是对测量分数一致性的估计 但并没有指出不一致的原因 4 获得较高的信度只是测验有效的必要条件 重测信度复本信度内部一致性信度评分者信度 例奇偶分半法 如一个学生对10道题回答为 正确答案标记为 错误答案标记为 1 2 3 4 5 6 7 8 9 10 这个学