量表的制定方法和考评PPT课件.ppt

现场调查设计 量表的制定方法和量表考评 1 量表的制定方法 2 一 量表的构成元素及层次结构 量表由若干领域 或维度 组成 领域 domain 由若干方面组成 方面 facet 由若干条目组成 条目 item 是量表最基本的构成元素 是不能再分割的构成单位 3 例如 WHOQOL 100量表的结构 包括6个领域 维度 24个方面100个条目一 生理领域二 心理领域三 独立性领域四 社会关系领域五 环境领域六 精神支柱 宗教 个人信仰 4 例如 WHOQOL 100量表的结构 包括6个领域24个方面100个条目一 生理领域 维度 一 疼痛与不适 方面 1 你对自己的疼痛或不舒服担心吗 条目 2 你在对付疼痛或不舒服时有困难吗 条目 3 你觉得疼痛妨碍您去做自己需要做的事吗 条目 二 精力与疲倦 方面 4 你容易累吗 条目 5 疲乏使你烦恼吗 条目 三 睡眠与休息 方面 6 你睡眠有困难吗 条目 条目 5 一 条目的形式 1 线性条目 被试者在有一定刻度 如0 10线段上划记 答案的选择项为整个线段 你感到疼痛吗 你的食欲怎么样 012345678910根本不疼极疼0 表示根本没有疼痛 10 表示非常疼痛 012345678910极差极好 6 一 条目的形式 2 等距等级条目 提供给被试者的选择项是等距离的 如 你怎样评价自己的记忆力 很差 差 中等 好 很好 3 不等距等级条目 选择项是不等距离的 如 对慢性病疗效的评价 优 良 中 差分级的词语间不完全等距 4 两分类条目 两项选择 如 是 否 7 一 条目的形式 5 累积型条目 一个条目反映的内容按难度和数量分成小项回答 如 您的健康影响您的行动吗 是否a 能步行1500米的路程 b 能步行800米的路程 c 能步行100米的路程 8 一 条目的形式 6 描述性条目 每个条目的各种答案均作较详细的描述如 反映活动能力及范围的条目 回答选项为 0 整天卧床 不能走动1 只能在室内做些轻微活动2 能在住宅周围活动3 可任意自由活动 9 二 条目的语义 评价性条目 如 好 差 如 你睡眠好吗 很差差不好也不坏好很好 你怎样评价自己的记忆力 很差差不好也不坏好很好 总体来讲 你的健康状况是 非常好很好好一般差 10 二 条目的语义 2 强度性条目 如 重 极重 如 你的听力对你的日常生活有不良影响吗 根本没影响有点影响有影响 中度 很影响极影响 在过去4周内 你常感到身上有疼痛吗 一点不疼很轻微疼痛轻微疼痛中等疼痛严重疼痛 11 二 条目的语义 3 频度性条目 如 很少 经常 如 你感到看东西越来越费力了吗 你觉得生活充实吗 12 二 条目的语义 4 能力性条目 如 能 完全能 如 你能看清马路对面的人吗 012345678910完全不能完全能 13 三 条目的性质 可知觉的客观性条目自我报告的主观条目 14 二 量表的制定步骤 1 明确研究对象及目的2 设立研究工作组3 测定概念的定义及分解 包括哪些领域和方面4 提出量表条目 形成条目池5 确定条目的形式及答案选项如以吸毒者生存质量测定量表为例 p144 15 举例 吸毒者生存质量测定量表的制定 一 制定的目的和构思1 吸毒者生存质量评定2 比较不同戒毒模式3 量表含多个维度 参照WHO生存量表的内涵 结合中国文化及吸毒者的特定情况 量表包括以下四个维度 躯体机能 精神心理功能 社会功能 社会支持和适应 家庭 工作 戒毒症状和毒副反应4 自评量表5 量表的可用性 简单 实用 有一定的信度 效度和反应度 16 举例 吸毒者生存质量测定量表的制定 二 量表的制定方法及步骤1 条目的选择及初筛成立研究小组 有关专家 教师 医生 戒毒所工作人员 通过选题小组 结合生存质量量表 心理测量量表 中国文化以及吸毒者的特定情况 初步提出102个条目构成条目池 通过议题小组对各个条目进行议论和评分 并对10个吸毒者有关条目进行预试性回答 删除得分较低的条目 删除或修改难于理解或不恰当的条目 结果保留65个条目 增加一个条目反应自我评估总健康状态 17 举例 吸毒者生存质量测定量表的制定 二 量表的制定方法及步骤1 条目的选择及初筛2 预试验及条目再筛选从某戒毒所随机选取了157名吸毒者进行了测试 根据测试结果对条目进行了再筛选 18 二 量表的制定步骤 1 明确研究对象及目的2 设立研究工作组3 测定概念的定义及分解 包括领域和方面4 提出量表条目 形成条目池5 确定条目的形式及答案选项6 指标分析及筛选 对条目池的各条目用统计学方法进行分析及筛查 以筛出的指标构成初步量表 7 预调查和量表考评 用初步量表进行预调查 由此对量表的信度 效度 反应度等进行考评 8 修改完善 形成最终测定量表 19 三 条目筛查方法 主观评价法 由专家和研究对象独立地对所提出的各个被选指标根据自己认为的重要性按百分制进行打分 根据各指标的重要性得分来挑选指标 舍去得分较低的指标 离散趋势法 指标的离散趋势小 用于评价的区别能力就差 因此选择离散趋势较大的指标 20 三 条目筛查方法 相关系数法 计算任两个指标相关系数并作统计检验 以与之相关的指标个数较多的和较少者作为被选指标 因为前者有代表性 可能提供较多的信息 后者有独立性 为其它指标所不能代替 主成分分析与因子分析 根据量表的设想结构及贡献率的大小确定所需的主成分数 然后根据各主成分与各指标的相关性大小分别考虑各个主成分主要由那些指标决定 21 三 条目筛查方法 聚类分析法 把指标聚为一定数目的类别 然后选择每一类中代表指标作为入选指标 原则 以每类中与其它指标相关性最好的指标作为代表指标 以类内相关系数较好 而类间相关系数较差的指标为代表指标 22 三 条目筛查方法 基于重要性评价的逐步筛选法 该法是1法的直间推广 类似德尔斐 Delphi 预测法 即先进行1法 选出得分较高的指标 将选出的指标反馈给评价者 再进行第二轮筛选 这样逐步进行下去 即可得到较公认的重要指标 23 三 条目筛查方法 逐步回归分析法 通过预调查得到一批数据 将总的评分作为因变量 Y 然后用y与各指标 X1 X2 Xn 进行逐步回归分析 筛出对y影响较大的指标 逐步判别分析 在预调查中包括不同的人群 如包括病人和正常人 用逐步判别分析筛出对于判别这两类人贡献较大的指标 24 量表性质的考核 25 一 可行性 feasibility 量表接受率 量表被所测定对象接受情况 实际操作中以量表的回收率表示 通常要求达到85 以上 量表完成率 接受调查对象完成量表的比例 通常要求达到85 以上 完成量表的时间 完成一份量表的时间控制在20分钟以内较易被人接受 26 2020 1 7 27 二 信度 reliability 信度也可理解为可靠度 或统计上所说的精确度 重测信度 test retestreliability 也称检验 再检验计算同一批对象两次测量结果的相关系数 即两批数据总分值的相关系数 如果达到0 7以上认为信度好 28 二 信度 reliability 重测信度的不足 第一次测量可能影响第二次测量 有些事物本身是在变化的 或说事物的真值在两个不同的时点就是不同的 29 二 信度 reliability 分半信度 split halfreliability 也称切半法检验量表跨条目的一致性 将量表按奇数指标为一组 偶数指标为一组 分成两个 半量表 分半信度即是从检验两个半量表得分的相关性来检验量表的信度 计算公式 R 2Rh 1 Rh 其中 Rh为两个半量表得分的相关系数 SPSS软件可直接计算分半信度 30 二 信度 reliability 3 克郎巴赫系数 cronbch 此系数表示量表的内在一致性 internalconsistency SPSS软件可直接计算克郎巴赫系数 值 多大为好尚有争论 一般生物性研究 0 7可视为较好 31 三 效度 validity 效度也可理解为准确度 内容效度 contentvalidity 量表中的每一条目是否反映了它想表达的内容 也就是说对大多数测定对象来说 对量表中的每一个问题的理解是否与我们想象的一致 常以专家评议为依据 32 2 标准关联效度 criterion relatedvalidity 也称标准效度 以一个公认有效的量表作为标准 检验新量表与标准量表测定结果的相关性 用两种测定工具测得总分的相关系数来表示 33 3 结构效度 constructvalidity 也称构想效度 根据研究者所构想的量表结构与测定结果的吻合程度 通常采用因子分析来评价 如果因子分析结果显示 提取的若干公因子所包含的条目存在研究者所预想的连带关系或逻辑关系 可认为该量表具有结构效度 同时具有内容效度 结构效度通常被认为是最强有力的效度评价 34 4 反应度分析 responsibility 量表能测出微小变化的能力 有学者认为反应度为效标效度 是效度的一种 35 常从以下两方面考察量表的反应度 区分同一个体 或群体 随时间的改变 用于评价医学干预前后的效果 量表应能区分已知的不同两类人群 如 健康人和病人的生存质量 36 举例 吸毒人群生存质量的测评 37 一 吸毒者生存质量量表的制定 制定的目的和构思吸毒者生存质量评定工具探讨戒毒模式量表含4个维度 领域 躯体机能 躯体运动和感官功能 食与性 睡眠与精力 精神心理功能 情绪 认知 精神应急量 自尊 社会功能 社会支持和适应 家庭和工作等 戒毒症状和毒副作用 38 量表为自评式 各条目按5级Likert法排列 量表的可用性 简明扼要实用性和可操作性有一定信度 效度和反应度 39 二 吸毒人群生存质量量表制定方法与步骤 条目的选择与初筛研究组 专家 教师 医生 戒毒所工作人员 选题小组 参考国外公认的生存质量量表和心理测量表并结合我国的文化特征和吸毒者的特殊情况 提出102个条目池 议题小组 对各条目进行议论和评分 吸毒者对条目进行预试性回答结果保留65个条目 40 2 预试及条目再筛选 在昆明市戒毒所随机选择157名吸毒者进行测试具体方法 变异度法 计算标准差并删除标准差小的条目 用s反映变异度 剔除了s 1 25的条目重要性评分法 计算各条目均分 删除均分低的 相关系数法 计算各条目与其维度得分的相关系数 删除相关系数低于0 4的条目 41 2 预试及条目再筛选 逐步回归分析法 各条目的得分与量表总分作逐步回归分析 选出对总分贡献大的条目 因子分析法 对65个条目作因子分析 并作方差最大旋转 删除在各因子上负荷系数较小 0 4 的条目及在两个或以上因子上负荷系数相近而无特异性的条目 42 3 吸毒人群生存质量量表 用上述5种方法分别筛选出 变异度法 50个条目重要性评分法 44个条目相关系数法 53个条目逐步回归分析法 43个条目因子分析法 48个条目 43 决定量表入选条目的原则 至少三种方法选出者作为必选条目只有两种或一种方法选出者结合专业知识和因子分析结果 如该条目的加入或去除对因子分析的累积贡献率影响的大小 来酌情考虑 44 最后量表保留4个领域 维度 40个条目 躯体机能 PH 9个条目 精神心理功能 PS 9个条目 社会功能 ST 11个条目 戒毒症状和毒副作用 SO 11个条目增加一条总体健康的自我评价 45 三 量表的考评 效度分析内容效度 有关各方面人员参与选题和讨论 提出的条目池反映了WHO的内涵及吸毒者的特殊问题 并按程序化方式筛选 所以可以认为具有较好的内容效度 维度相关性 各条目得分与其维度得分之间相关均较大 相关系数r均在0 6以上 而与其它维度相关较小 46 因子分析 因子分析筛出7个主成分 累计贡献率达66 7 第一主成分 戒毒症状和毒副作用维度 方差贡献38 8 第二主成分 躯体功能维度 方差贡献7 4 第三主成分 心理功能维度 方差贡献5 0 第四主成分 社会功能维度 方差贡献3 8 第五主成分 社会功能维度中家庭和亲朋关系 第六主成分 社会功能维度中社会环境 第七主成分 心理功能中较重要的忧虑和抑郁方面 说明量表的结构与设计时相吻合 因此认为具有较好的结构效度 47 效标效度 标准效度 因为没有金标准 本研究采用WHOQOL 100和SF 36为标准结果 本量表与WHOQOL 100的相关系数r 0 73 本量表与SF 36的相关系数r 0 71 48 2 信度分析 重测信度 躯体功能 重测相关系数r 0 80心理功能 重测相关系数r 0 64戒毒症状 重测相关系数r