研究工具性能的测定 ppt课件.ppt

研究工具性能的测定 1 心理测验 问卷 的特性 与物理测量相对比 1心理测验的间接性 行为样本 2心理测验的相对性 结果描述 3心理测验的客观性 标准化 因此 心理测验的客观化程度较低 而对心理测验进行性能测定更为必要 2 一 信度 Reliability 一 概念 测量结果的一致性或可靠性程度 二 估计信度的方法 重测信度复本信度分半信度同质性信度评分者信度 3 1 重测信度 test reliability 1 概念 又称稳定性系数 指同一研究工具两次或多次测定同一研究对象 所得结果的一致性程度 2 计算方法使用同一研究工具 对同一研究对象 样本量不小于30 多次测量 求结果的相关程度 例子见课本 4 3 注意问题 两次测量之间的间隔时间要恰当 时间太短 第二次测量受第一次测量的影响太大 时间太长 两次测量中间发生的事件会导致要测量的事物性质发生改变 一般2 4周 重测信度只适合于该研究工具所测量的事物性质是相对稳定的情况下 两次测量的环境条件要一致 从而减少无关变量的影响 5 2 复本信度 a1ternate formreliability 1 概念 一组被试在两个平行 或等值 测验 一个为正本 一个为复本 上的得分的相关程度 又称等值性系数 2 测验等值的必要性 例如 四六级考试托福 雅思 GRE 3 计算方法将两个的等值测验连续或间隔一段时间分两次对同一批被试施测 计算其相关系数 4 注意问题 两次测验的时间间隔要恰当 两次测验的环境条件要一致 6 3 分半信度 split halfreliability 1 概念 将测验按照正常的程序施测 然后将全部项目分成相等的二部分 分别进行记分 然后计算这两半测验分数的相关程度所得的相关系数 2 计算方法首先 采用奇偶折半法 前后折办法 把测验分成两半 然后 利用Spearman Brown公式进行计算 为什么 Spss操作 Spearman Brown分半信度 Guttman分半信度指标 两半部分的信度 7 4 同质性信度 coefficientofinternalconsistency 1 概念 指测验内部的所有题目的一致性 也称内部一致性系数 注 分半信度实际上是对测验内部一致性的一个粗略估计 但由于不同分半法所得的信度值各不相同 所以分半信度不是最好的内部一致性的估计方法 2 计算方法 克伦巴赫系数KR 20 KuderandRichardson 8 克伦巴赫系数 Cronbach s 最常用 适用条件 项目多重计分 库德 理查逊公式 KR 20 适用条件 二分制题目 即答对一题给一分 二元資料可視為兩個刻度的連續性資料 一併可用 係數推算 Spss计算方法 9 5 评分者信度 interraterreliability 1 概念 对于同一测验结果 不同评定者所给评分的一致性程度 2 计算方法 数据类型为计数数据时 见课本P100例子 当数据为等比或等距数据时 计算皮尔逊相关系数 当数据为等级数据时 两人评定用斯皮尔曼等级相关系数 多人用肯德尔和谐系数 10 11 三 影响信度的因素 1 被试样本被试样本越异质 信度越高 所以在一个被试群体取得较高的信度 并不意味着在其他被试群体也能获得同样高的信度 2 测验题目数量题目越多 信度越高 3 测验难度适中难度的测验信度较高 12 四 信度的应用 1 信度系数的来源要注明使用的哪种信度系数 样本大小及取样范围 2 信度系数的评价目前尚无统一的评价标准 一般认为 系数低于0 35 信度太低 应拒绝使用 介于0 5 0 7之间 为可以接受 高于0 7为信度较高 信度系数在小于0 7时 不能用于对个体作评价 也不能用于对团体间作评价 信度系数在大于0 7时 能用于对团体间作评价 信度系数在大于0 85时 能用于对个体作评价 13 14 信度 30 不可信 30 信度 40 初步的研究 勉強可信 40 信度 50 稍微可信 50 信度 70 可信 最常見的信度範圍 70 信度 90 很可信 次常見的信度範圍 90 信度 十分可信對研究問題相當了解 已有相當多文獻可以參考的研究 至少要超過 可信 以上的水準 探索性 有關案例很少的研究 稍微可信 亦可通過 對研究問題的真象一無所知 沒有一篇可以參考的文獻 這樣的研究至少也應該達到 勉強可信 的水準 问卷的信度举例 整个压力源问卷的分半信度是0 7751问卷及其各维度的同质性信度 15 二 效度 Validity 一 概念 某一研究工具能真正反映它所期望研究的概念的程度 二 效度与信度的关系 信度是效度的必要而非充分条件效度是信度的充分而非必要条件效度高是测验的终极目的 16 三 估计效度的方法 表面效度内容效度效标关联效度结构效度 17 1 表面效度 facevalidity 1 概念 由评估人根据自己对所要测量概念的理解 尽其判断能力之所及来判定工具是否恰当 2 评定方法依靠评定人员的主观判断3 应用 由于缺乏逻辑分析 所以不能作为工具质量的有力证据 表面效度高并以代表问卷就好 18 2 内容效度 contentvalidity 1 概念 根据理论基础及实际经验来对工具是否包括足够的项目而且有恰当的内容分配比例所作出的判断 2 评定方法常常使用专家评定法 19 3 校标关联效度 criterion relatedvalidity 1 概念 又称统计效度或实证效度 指以测验分数和效标之间的相关系数来表示测验的效度 校标又称效度标准 指衡量测验有效性的外在标准 2 评定方法同时效度 测验分数与当前现有的校标之间的相关程度 例如高考分与智商测验分数 预测效度 测验分数与将来的校标资料之间的相关程度 例如高考分与大学成绩 20 举例 效标效度 同时效度 还是预测效度 21 4 结构效度 constructvalidity 1 概念 测验对理论上的构想或特质的测量程度 2 评定方法 从某一理论出发提出各种关于某一特质的假设 设计和编制测验并进行施测