医学科研方法问卷设计和考评.ppt

问卷的设计和考评 杨永利 博士/副教授 EMAIL: Tel： 67781249 郑州大学公共卫生学院卫生统计学教研室 问卷制定的步骤 问卷制定中应注意的问题 问卷的一般结构 问卷的概念 问卷质量考评 内 容 问卷的概念 问卷是收集资料的工具，是一套有目的、有系统及有顺序的 问题表格设计。研究者通过问卷，搜集到受访者对研究主题 有关的意见、态度、价值以及过去与现在的行为等。 问卷可分为两类： 1）自填式问卷:受访者自行填写。 2）他填式问卷:访问员将问题念给受访者听，再由访问员 填写。 问卷的形式：调查提纲；调查表格；标准的量表。 问卷的一般结构 1. 标题。如医护人员职业紧张调查。 2. 说明（卷首语）。旨在向被调查者说明调查目的和意义。 3. 被访者基本情况。旨被调查者的社会人口学特征。如年龄、 性别、职业、教育水平等。 4. 主要内容。调查表的主要部分。 5. 编码。 6. 作业证明的记载。如调查员的姓名，调查日期。 主要用来分组，从而说明这些 因素对调查结果的影响。 便于资料的录入和分析 举例1 问卷编码：为了 资料核查方便 标 题 卷首语 被访者基本情况 编码：为了资料录 入和分析的方便 若事先已确定好抽样单位，此 时可以选择题形式出现： 1 郑州大学一附院 2 河南省人民医院 3 研究内容及编码 B 工作内容 采用标准 的量表 调查员签名：_ 调查日期 年月日 作业证明记载 举例2 问卷制定的步骤 1.设立研究工作组 2.提出调查项目 3.项目筛选 4.确定每个调查项目的提问形式和类型 5.确定每个项目的回答选项 6.预调查及评价 7.修改完善 量表编制建构的流程 调查项目可以采用以下的提问形式： 1）开放式问题：指对所提出的问题没有列出可能的答 案。如“服药后您有什么不良反应？” 优点：被访者可以充分按照自己的想法和方式回答问题，所 得到的信息丰富；缺点：难以进行资料的分析。 2）封闭式问题：事先设计了各种可能的答案，被访者 只能从中选择一个或几个。 优点：被访者回答方便，提高调查的回收率和效率；缺点： 设计困难，被访者只能在规定的范围内回答，可能无法反应 其真实想法。 问卷的题型： 1.填空式。 如年龄，血压，血常规检测。 2.选择题。 （1）单项选择 （2）多项选择 3 排序。 E2 (可多选)您所在的医院所采取的预防工作场所暴力的措 施有（ ） A 保安全天定时巡逻 B 病区安装摄像头 C 急诊值班医务人员配备钢盔、警棒等防护设备 D 保安在病区设点值班 E 候诊区均为固定座椅 F 夜间医院内工作区域保持灯光明亮 G 其它（请注明： ） 摘自医院工作场所暴力调查问卷 对于填空题和单项选择题，直接录入数据或数字代码就行。 ID 住院号 20120223 A1 年龄 36 岁 A2 性别 1 男 2 女 A3 血压 135 mmHg/ 73 mmHg 。 IDA1A2A3AA3B 201202336113573 多项选择题资料的录入有两种方式 E2 (可多选)您所在的医院所采取的预防工作场所暴 力的措施有（ B D E F ） E2 BDEF E2aE2bE2cE2dE2eE2fE2g 2121112 1 有 2 无 方法1方法2 强烈推荐用第2种方法，直接导入到 分析软件后就可以进行分析。 问卷制定中应注意的问题 1.卷首语要简单明了、文笔亲切、打动人心。 谁在做调查？ 有明确的单位，不用*课题组 调查目的？ 不能笼统说“为了科学研究” 要调查什么？ 与问卷内容一致 没有对调查对象利益的损害。保密；匿名 问卷制定中应注意的问题 2.避免不确切的词。 很久、经常、一些、最近等词不能用。 如：您是否经常生病？ 不确切 您上月生了几次病？ 确切 如：您最近在医院是否遭受过工作场所暴力？ 不确切 您在过去的半年里是否遭受过工作场所暴力？ 确切 如：您在哪儿出生？（很多人回答“在医院”） 不确切 您的出生地是 ？ 确切 问卷制定中应注意的问题 3.避免断定性提问。 A1 您抽烟吗？ 1 是 2 否（跳转至A3) A2 您平均每天抽多少支烟？ 支 A3 您一天抽多少支烟 ？ 问卷制定中应注意的问题 4.避免引导性提问。 被动吸烟会导致肺癌的发生吗？ 1 会 2 不会 有人认为被动吸烟会导致肺癌，您同意吗？ 1 同意 2 不同意 问卷制定中应注意的问题 5.避免令被访者难堪或敏感的问题。 敏感问题调查技巧 您是否有婚外性行为？ 您每个月收入是多少？ 问卷制定中应注意的问题 6.避免笼统、抽象的问题。 要有明确的界定： 年龄有实岁和虚岁，用出生日期来推算年龄更科学。 经济收入：要明确仅指工资，还是包括奖金，津贴和其他收入。 家庭人口有常住人口和生活在一起开支的人口。 年龄、经济收入，家庭人口，吸烟等调查。 Q1：您对本医院的满意度如何 ？ 1 满意 2 一般 3 不满意 不 一 满 满 意 般 意 Q1：您对本医院医疗水平的满意度如何？ Q2：您对本医院医生服务态度的满意度如何？ Q3：您对本医院的就医环境满意吗？ Q4：您对本医院伙食的满意度如何？ 以下内容摘自医院工作场所暴力调查问卷 问卷制定中应注意的问题 7.避免一问多答。 您的母亲得过糖尿病吗？ 1 是 2 否 您的父亲得过糖尿病吗？ 1 是 2 否 您的父母得过糖尿病吗？ 1 是 2 否 问卷制定中应注意的问题 8.注意问题的数量和顺序。 问题的数量。少而精的原则。 问题的顺序 由易到难，由浅入深 引起调查对象兴趣的放在前面，容易引起他们紧张不安的或 产生顾虑的放在后 调查对象熟悉的问题放在前面，他们感到生疏的问题放在后 先问知识问题，后问态度、行为、意见 开放式问题放在最后 内容相近的问题尽量放在一起（检验信度的双重问题分开） 问卷制定中应注意的问题 9.关于定量指标的半定量化。 A1 您的月工资是( ) （1）500元以下； （2）500-999元； （3）1000-1999元； （4）2000元及以上 注意划分的档次不能太多，各档次的数字正好衔接，无重叠， 中断现象。 10. 其他需要注意的问题: 调查问卷的长度、复杂程度、调查内容与被调 查者的关系等主观因素; 被调查者的阅读能力、理解能力、表达能力和 记忆能力等客观因素; 问题的统计分析方法，避免出现无法分析或使 处理过程复杂化的问题和答案。 问卷制定中应注意的问题 问卷质量考评 1.满足研究目的的需要 2.问题少而精 3.适合调查对象 4.有较高的信度、效度和可接受性 （一）效度评价（validity） 效度，即准确度，指调查表确实测定了研究者所 要测定的特征以及测定的程度。 内容效度 结构效度 标准关联效度 内容效度：调查表是否“看起来”符合调查的目 的和要求。 1）主观经验判断。即组织相关专家论证。 2）根据调查结果分析。如某研究的目的是筛选影 响脑卒中患者康复效果的因素，调查后进行的分 析是否找到了可疑影响因素。 结构效度：调查表的结构是否符合理论构想和框 架。WHOQOL-100量涵盖6个领域（维度）。 常用因子分析方法判断。由于因子分析要求资料服从多元 正态分布，因此，一般当采用的调查表是量表时，即各条 目的答案为等级资料，如前边提到的工作内容量表，选项 有“非常同意，同意，不同意，极不同意”时，才进行结 构效度的分析。 标准关联效度：调查表得分与某种外部标准（效 标）间的关联程度。 常用测量得分与效度标准之间的相关系数表示，外部标准 指调查表以外的另一些客观指标或人们熟知的另一种调查 表。如艾滋病抗病毒疗效评价比较客观的指标是CD4细胞 计数，近年来有学者提出用生存质量评价抗病毒疗效，可 用生存质量得分和CD4细胞计数的相关系数来判断生存质 量量表的标准关联效度。 （二）信度评价（reliability） 信度是指通过调查表得到的结果的一致性和稳定性， 亦即精确度。 重测信度 分半信度 内部一致性信度 重测信度：是在一定时间间隔中运用同一调查表作 重复测量所得的信度系数，也称为稳定系数。 重测信度常用相关系数或kappa一致性系数来衡量。 分半信度：是在一次测量后将条目分为等价的两 部分，分别计算两部分的得分，并以其相关系数 作为信度指标。 两部分之间 的相关系数 内部一致性信度：是目前比较流行的信度评价方法， 是分半信度的推广。它无需将条目分为两个部分，而 是以条目之间的联系程度对信度做出估计。 内部一致性信度主要有Kuder-Richardson公式和克朗 巴赫系数，前者仅适用于二分类条目，后者用于等级 资料。 条目数第i个条目得 分的方差 调查表得分 的方差 C C C CC C B B D D B B B B D D D D A A A AA A 信度信度(Reliability)(Reliability)：测验是否精准：测验是否精准(Precision)(Precision)，一致性和稳定性？，一致性和稳定性？ 效度效度(Validity)(Validity)：测验是否正确：测验是否正确(Accuracy) (Accuracy) A A：精准又正确(Reliable & Valid ) B B：不精准但正确(Unreliable but Valid ) C C：精准但不正确精准但不正确(Reliable but Invalid )(Reliable but Invalid ) D D：不精准也不正确不精准也不正确(Unreliable & Invalid )(Unreliable & Invalid ) 信度、效度的关系 （三）可接受性评价（acceptability） 可接受性是指被测定者对调查表的接受程度。 可接受性主要取决于调查表条目是否有简单性； 内容是否为被测定者所熟悉并且易于填写；调查 所需时间是否较少等因素。 可通过调查表回收率、合格率和填表所需平均时 间等来评价。 信度和效度评价特别适合于各条目具有得分的调查表，如 职业紧张量表、职业倦怠量表、生存质量测评量表。 信度和效度相比，效度更重要。信度和效度考评用的主要 指标是相关系数，一般认为： 0.9很好；0.7-0.9 好；0.4