医学统计学--协调性分析.ppt

1、协调性分析,公共卫生学院卫生统计教研室 易 静,一、涵义,也称一致性分析，指了解针对某些问题而进行的专家评价结果的协调一致性的统计分析方法。 一致性好，说明评价结果可靠；一致性不好，说明专家之间评价分歧较大。,造成分歧的原因： 1. 缺乏评价统一标准； 2. 专家专业水平相差较大，对问题的熟悉程度悬殊； 3. 专家有主观偏性； 4. 被评价问题和对象展示的内容和表象不充分或不清，致使了解情况专家与不了解情况专家评价发生较大波动。,专家评价的原则： 1. 制定多维度客观细微的评价标准； 2. 回避评价利益相关专家，数量适中（少35，中79，多1115）； 3. 杜绝评价前不正当的被评价对象与评价

2、专家信息沟通，注意保密性； 4. 提供充分、客观、真实、直接的评价资料和现场。,协调性分析中的两（多）位专家的含义可以不同时间、不同方法、不同级别的概念替代，即分析的不是专家间协调性，而是时间一致性、方法一致性、级别一致性。 评价的对象可以是一个问题的多个方面，亦可以是多个问题或单位或对象的逐一综合打分。 协调系数反映评价的客观性和真实性。,二、两次(种)评价的一致性分析(Kappa分析),0.75K1 好 0.40 K0.75 较好 0K0.4 差,PA:实际一致率，Pe：期望一致率,1. 协调系数,2. 假设检验,例1,630名儿童吸烟状况两次调查结果,，1.96，P0.05,认为：两次调

3、查存在一致性。,例2,200例病人的两种检验结果,1.96，P0.05,认为：滤纸检查与血清检查存在一致性。,三、多次（种）评价的一致性分析,1. 协调系数 2.假设检验,(1),(2),例3,5位专家对10个单位工作质量评分的秩次,P0.05,调查问卷（表）的考核与分析,一、提问方式“十不要”的检查,1. 过于专业化问题:核心家庭、人均消费指数、疗程 2. 多向提问：父母、同学、同事 3. 诱导提问：给出结果和答案后提问 4. 否定提问 5. 提问敏感性问题：隐私性问题 6. 问题叙述过长 7. 提出脱离对象所处环境和水平的未知领域问题：性别、年龄、职业、 时间过久 8. 提出抽象概念问题：

4、收入、支出、情感、评价等 9. 违背顺序：实际行为、经历在前；理解、认识、理念、态度在后 10. 跳跃式问题过多,二、问卷效度、信度考核,（一）效度(validity)：指测量结果与试图要达到的目标之间的接近程度。考察有效性和准确性准确度。 1表面效度 2内容效度 主观指标 3结构效度 因子分析 4标准关联效度 相关分析,1. 表面效度(face validity),指问卷在外部形式上的有效程度，是一群评定者 主观上对于测量工具外观上有效程度的评估，考 评维度、条目内容与调查研究目的关联与覆盖面。,2. 内容效度(content validity),问卷内容的适切程度，是针对问卷的维度框架、目

5、标内容，用系统的逻辑方法来详细分析，又称逻辑效度（logical validity）。 首先侧重于维度框架内容能否包涵调查内容；其次是考评维度内主要条目是否与本维度要表达的内容相一致、重点突出。增删条目围绕时间可行性、应答准确性两个原则进行。,3. 结构效度(construct validity),指调查问卷（表）测得一个抽象概念或特质（分析结构与设计结构的一致性 ）的程度。 以实证方法，查核测量结果是否符合理论假设的内涵。采用因子分析理论，引导出各项关于潜在特质或行为表现的基本假设。,4. 标准关联效度(criterion-related validity),调查问卷（表）所得数据与某种外部

6、标准（效标，如国际标准常模问卷和量表）之间的相关，表示问卷有效性的高低。 标准关联效度考评条件 具备关联内容 具备关联标准。,(二)信度(reliability)：对同一事物进行重复测量时，所得结果的一致程度，即测量结果的稳定性或可靠性。考察稳定性和可重复性精密度。 1重测信度 2分半信度 3内部一致性信度,1. 重测信度(test-retest reliability),时间间隔重测 定量r 同时复本重测 等级r、Kappa,2. 分半信度(split-half reliability),将调查问卷（表）条目分成两半，然后再以 前半段条目与后半段条目做相关，考核、衡 量同质性。,3. 内部一

7、致性信度,分析问卷（量表）条目间的一致性。 Cronbachs alpha， ：估计的信度 ：测验的总条目数 ：测验的第i个条目得分的方差 ：问卷维度方差或量表总方差,三、关于反应度的考评 （responsibility to change）,反应度在微观上体现问卷中某条目问题及提供答案能否测定出被调查对象对结果变化的识别、理解和区分能力，主要是结果等级的把握和区别。 反应度在宏观上体现问卷中某条目结果能否测出同一群体（非被调查对象个人）随时间变化与另一异类人群间的差别。,四、可接受性评价,简单性 对象对问题熟悉性 利益相关性积极性、参与性 易填写性 时间短促性 指标：回收率、有效回收率、合格率、平均填表时间,五、调查问卷（表）分析时的基本处理方法,（一）变量答案的数量化(赋值) 二结果：0，1 多结果：哑变量 等级结果：0，1，2,. 可多选结果：按频数给予权重后再记分、 排序后定分,假如职业分类为工、农、商、学、兵5类，则可定义4个哑变量，比分类数少1个，编码方法如下：,（二）问卷总分-条目得分累加技术,答案备选项数相同，在