刘文佳《量化研究与统计分析》PPT课件

1 第十三章量表编制与信效度 2 量表编制的基本流程 文献整理与数据搜集 发展量表编制计划 试题编写 预试施测 项目分析 建立正式量表 技术指标建立 信度与效度分析 量表维护 常模的建立与更新 正式施测 准备阶段 预试阶段 正式阶段 后续发展 第一节 3 量表编制计划的内容与说明 第一节 4 信度 reliability 意义 测量的可靠性一致性 consistency 表示测验内部试题间是否相互符合稳定性 stability 不同的测验时点下 测验分数前后一致的程度信度的数学原理凡测量必有误差 误差由概率因素所支配 为一随机误差 第二节 5 古典测量理论的信度观点 测量分数组成测量分数 真分数 测量误差测验总变异量 真实分数的变异 随机误差变异信度系数1 误差占测量变异百分比信度系数介于0与 1之间 数值越大 信度越高 第二节 6 测量标准误SEM 信度表示测量分数的稳定与可靠性 亦表示测量受到测量误差的影响程度测量分数的变异量 受到测量误差影响的部分 称为测量误差变异量 开方后称为测量标准误 e 测量误差被假设呈常态分配 因此测量标准误配合常态化概率可以用来进行测量分数的区间估计 rxxX特质的测验信度 X分数的95 的信心区间 第二节 7 信度的类型 再测信度 test retestreliability 系指以同一种测量工具 对同一群受试者 前后测验两次的相关系数 又称稳定系数 复本信度 a1ternate formreliability 同一群受试者接受两种复本测验的得分之相关系数 折半信度 split halfreliability 测验题目依题目的单双数或其他方法分成两半 计算受测者在两半测验上的分数的相关系数 内部一致性系数 coefficientofinternalconsistency 反映测量工具内部同质性 一致性或稳定度 同质性越高 代表量表试题是在测量相同的特质 KR20适用于二分变量的测量 Cronbach s 适用于多元尺度变量的测量 评分者间信度 inter raterreliability 不同的评量者间分数的相关系数 第二节 8 常用信度 折半法测验题目依题目的单双数或其他方法分成两半 计算受测者在两半测验上的分数的相关系数 折半方式多为odd evensplit 相关系数多采史比校正系数 Spearman Brownprophecyformula 内部一致性法原理反映测量题目的内部同质性 一致性或稳定度 原理为计算测量项目的平均相关 rij 同质性越高 代表量表试题是在测量相同的特质 内部一致性系数 coefficientofinternalconsistency KR20 Kuder Richardson 1937 适用于二分变量的测量Cronbach s 适用于多元尺度变量的测量 第二节 9 影响信度的因素 影响信度的关键因素是测量误差 可以减低误差的方法 即能够提高信度 基本原理 中央极限定理 测量标准误 共变量的计算影响信度的因素受试者因素 如受测者的身心健康状况 动机 注意力 持久性 作答态度等变动 主试者因素 如非标准化的测验程序 主试者的偏颇与暗示 评分的主观性等等 测验情境因素 测验环境条件如通风 光线 声音 桌面 空间因素等皆有影响的作用 测验内容因素 试题取样不当 内部一致性低 题数过少 时间因素 第二节 10 效度 validity 效度的意义测量的正确性 指测验或其他测量工具确能测得其所欲测量的特质或功能之程度测量的效度愈高 表示测量的结果愈能显现其所欲测量对象的真正特征测验的效度通常以测验分数与其所欲测量的特质之间的相关系数表示之评估效度的方法判断法 informedjudgment 测量特性与质的评估实证法 gatheringofempiricalevidence 根据具体客观的量化指标来进行评估 第三节 11 三种不同的效度 内容效度 contentvalidity 反映测量工具本身内容广度的适切程度 强调测量内容的广度 涵盖性与丰富性针对测量工具的目标和内容 以系统的逻辑方法来详细分析 又称为逻辑效度 1ogicalvalidity 表面效度 facevalidity 指测量工具在外显形式上的有效程度效标关联效度 criterion relatedvalidity 以测验分数和特定效标 criterion 之间的相关系数 表示测量工具有效性之高低 同时效度 concurrentvalidity 与预测效度 predictivevalidity 构念效度 constructvalidity 指测量工具能测得一个抽象概念或特质的程度 多元特质多重方法矩阵法 multitrait multimethodmatrix 聚敛效度 convergentvalidity 及区辨效度 discriminantvalidity 因素效度 factorialvalidity 一个测验或理论因素结构的有效性 第三节 12 多元特质多重方法矩阵法 多重方法多重特质矩阵以两种以上的方法 methods 测量两种以上的特质 traits PsychometricalfeaturesReliability 信度 以相同方法测量相同特质 应有最高相关 Convergentvalidity 聚合效度 以不同方法测量相同特质 应有次高相关 Discriminantvalidity 区辨效度 以相同或不同方法测不同特质 应有最低相关 Methodbias effects 方法偏误或方法效应 以相同方法测不同特质的相关高于以不同方法测不同特质的相关 差异应越小越好 第三节 13 增益效度 incrementalvalidity 指某特定测验对于准确预测某一效标 在考量其他测量分数对于效标的影响后的贡献程度某项能力测验 A 在测量个体的认知能力 该能力测验应可用以解释学生的学习成果 Y 而且在将努力因素 B 排除之后 能力测验仍然能够非常有效的解释学习成果 即可说明能力测验具有相当程度的增益效度 第三节 14 区分效度 differentialvalidity 个别差异的鉴别除了可以从效标的回归分析来评估之外 也就是效标关联效度 亦可以从测验分数对于不同行为作业 或效标情境的表现的差异来评估 第三节 15 复核效化 cross validation 定义指测量的结果具有跨样本或跨情境的有效性 在结构方程模式中 一个理想模型在不同样本上重复出现的程度 即称之为模型的复核效化基本程序将样本切割为两个样本 利用多样本模型分析针对同一个假设模型进行估计 一个样本称为测定样本 calibrationsample 另一个样本则为效度样本 validationsample 先将一个被检验的SEM模型在测定样本上进行估计后 重复在效度样本上进行检验 检验时 参数的数值应套入先前在测定样本上所使用的模型设定或参数估计数 进行模型检验 第三节 16 效度衡鉴技术 相关分析 Correlation 多元回归分析 Multipleregression 因素分析 Factoranalysis 多重特质多重方法矩阵 Multitrait Multimethodmatrix 结构方程模式 StructuralEquationModeling 第三节 17 影响效度的因素 测量过程因素 实施过程标准化样本性质 选用异质性高的样本样本的代表性效标因素不适当的效标选用效标本身的测量质量干扰变项 第三节 18 信度与效度之关系 信度代表测量的稳定性与