L-10常见统计学错误(2016)(总).ppt

医学论文常见统计学错误与纠正 方积乾中山大学公共卫生学院医学统计与流行病学系2016年9月 设计与实施分析与结果 1 对象合格标准不明确 Eligibilitycriteria 年龄 性别 临床诊断 病情 Exclusioncriteria 常为保障病人安全目的 读者据此判断研究结果可以应用到什么范围统计学 明确总体总体 大同小异的个体集合 常见错误 只报告来源和时间段 总体不清晰 大杂烩 得不到科学结论 事前未规定合格标准和排除标准 事后排除 不报告按照合格标准和排除标准筛选对象的过程 2 结局指标多而杂 primaryoutcomemeasure 是事先规定的最重要的结局指标 通常以此为准来计算样本量 secondaryoutcomemeasure 可以几个 但不宜太多 常见错误 终点指标过多 大海捞针 临床试验时 不知道哪个指标在组与组间有差异 确定某个指标后 万一组间没有差异 岂不被动 生理 生化 组织学 基因 都做 内容丰富 显得水平高 许多仪器一下子可以做许多项目 许多项目一一分析 哪个有意义 就报告哪个指标 错在哪里 哪些指标可能有组间差异 必须心中有数 假说 预计将要得到的结论 假说是科研的灵魂心中无数 不要 先上马再说 指标多 实验工作量大 大海捞针 碰运气 不是科研 指标多 翻来覆去分析 制造假阳性 Nature杂志统计学指南 常见错误之一 翻来覆去分析 会制造假阳性 常见错误之一 Nature 多重比较不校正 多重比较 对一组数据作多项比较时 必须说明如何校正 水平 以避免增大第一类错误的机会 如何校正 Bonfferoni校正当同一组数据同时作k次分析时 若限定犯假阳性错误的概率总共不超过 则每次分析要用来控制假阳性的概率 例 3 不重视对照 为何必需对照 消除非研究因素的混杂实验组和对照组受非研究因素的影响尽可能相同 使两组的差异主要反映研究因素的效应 鉴别研究因素的效应和自然发展结果例如 研究某药物对口腔溃疡模型兔的疗效 口腔溃疡有自愈的倾向 必须有对照扣除自愈效应 常见错误1 没有对照 千方百计省去对照组 以减少一半工作量 自身前后对照历史对照文献对照 标准 对照 常见错误2 对照不当 对照太弱 安慰剂对照对照过强 西药 加中药 西药对照剂量有争议 试验药 大剂量 对照药 中小剂量对照基线不可比 试验组年轻 病轻 对照组年老 病重 应当如何 事先明确研究假说 例如 新药比常规药好 以常规药为对照设计 研究组新药 对照组常规药可比性 基线可比 过程可比 终点可比保证可比性措施 干预性研究 随机化观察性研究 匹配 4 样本量无根据 干预性研究 500例患者随机分成两组 为什麽500例 不多不少 500例从天而降 现成送上门来 观察性研究 10年期间A组3000例 B组258例 有多少用多少 应当如何 报告最小样本量估算及其依据 比较两组测定值的均数依据 例 格列美脲 格列苯脲对比研究以HbA1c为主要终点 报告依据1 欲检出HbA1c临床差异 0 65 2 假定标准差为1 3 3 双侧检验水平0 054 功效80 退出率20 计算 157例 2 比较两组达标率依据 1 预计一组发生某结局的百分比为 2 预计另一组发生某结局的百分比为 3 允许犯假阳性错误的机会 4 允许犯假阴性错误的机会 应当如何 报告最小样本量估算及其依据 例 格列美脲 格列苯脲对比研究以HbA1c达标为主要终点 5 随机化 说而不做 做而不严 处理分配的随机化为什么这么重要 1 消除分配处理有意或无意的偏倚 2 为实施盲法创造条件 3 使得有可能利用概率论来说明 各干预组之间的差异不大可能是偶然性造成的 说错和做错 将随机化当作 廉价名词 实际没做 却写 随机分成两组 科研道德 将 随意分组 当作随机化将 机械分组 当作随机化略去筛选过程 简单地报告将多少人随机分组略去实施过程中丢失对象 将最后两组人数说成是随机分组人数 应当如何 成功的随机化取决于 1 产生一个不可预见的分配序列 2 隐蔽 allocationconcealment 这个序列 直到分配完毕 必须建立一个分配处理的系统 报告如何随机分组 如何 隐蔽 谁做随机序列 谁收病人 谁分药和发药 分组方案如何保管 随机化类型 Simplerandomisation 简单随机化 Blockedrandomisation 区组随机化 Stratifiedrandomisation 分层随机化 Minimisation 不均衡最小化 盲法为什么这么重要 对病人 盲 防止performancebias 对医护人员 评价人员 盲 防止detectionbias或assessmentbias 不盲 有利于非对照组 对数据分析者 盲 防止为得阳性结果而选择并非事先计划的分析方法 必须报告 盲 谁 盲 6 避而不谈盲法 常见错误 如何 盲 轻描淡写为何没有 盲 不加说明普遍忽视盲法判定终点没有独立的终点判定委员会 专人 专职 盲法措施盲法实施效果如何 缺乏评价 7 量表的滥用 医学研究中 量表的应用日益广泛 生存质量 qualityoflife QOL 患者报告结局 patientreportoutcome PRO 美国FDA规定药品说明书必须有PRO内容 国外已经研制了许多量表 可以借鉴 有些课题国外还没有适宜的量表 有待研制国内许多医学研究也开始采用量表测量临床疗效 常见错误 1 引进国外量表 未经作者同意 声称是 xx量表的中文版 妄称文化调试 随意修改未曾考察中文版量表的信度 效度和反应度2 自制量表 未经查阅文献和专家咨询 匆忙起草没有概念框架和基于概念框架的条目池没有试用和现场调查 没有心理测量学评价 应当如何引进国外量表 联系原作者 征得同意 翻译 逆翻译 文化调试 与原作者共同修改 定稿 收集现场数据 评价信度 效度和反应度 应当如何研制新量表 查阅文献 专家咨询 确定概念框架 领域 方面 根据概念框架建立条目池量表初稿小规模试用 修改收集现场调查数据评价量表 信度 效度 反应度 修改 定稿 请同学们考试带2B铅笔 考试时间 2016年10月26日 周三 19 00 20 30考试地点 新教201 301 401课室请提前20分钟进场 查看座位号安排考场安排 将在10月25日公布FTP名单请查阅FTP 查不到名字的同学 请于24号前发邮件给吴少敏老师 wushm 统计课程考试通知 因第七周需要进行政治考试 部分班的实习课调整如下 实习课 DEF班 原10 13 星期四 晚上的课顺延一周 调到10月20日 节次 地点不变 调课通知 医学论文常见统计学错误与纠正 II 分析与结果 8 不考虑基线均衡与否 不首先考察基线是否均衡不论基线均衡与否 一概使用单变量分析方法 比较百分比或均数 检验 比较均数 t检验 非参数检验比较发生某事件的时间 Kaplan Meier方法 应当如何 不论干预性研究还是观察性研究 数据分析的第一步总是考察基线是否均衡 列表报告若干预性研究许多变量基线不均衡 随机化失败 若观察性研究多个变量基线不均衡 很自然 从设计入手 认真解决 对付基线不均衡的统计学方法 1 分层 2 匹配 3 回归 9 缺失值处理不当 三类缺失机制 完全随机缺失 missingcompletelyatrandom MCAR 缺失完全由随机因素造成随机缺失 missingatrandom MAR 缺失与已有的观察结果有关非随机缺失 missingnotatrandom NAR 缺失与当前观察到和尚未观察到的结果有关 常见错误 丢弃具有缺失值的个体 仅完全随机缺失才可丢弃有缺失值的个体临床试验中 若仅采用完整病例进行分析 违背Intention To Treat原则 ITT原则 仅在以下情况下考虑使用完整病例进行分析 在探索性研究中 药物研发的初期阶段 在确证性试验中 作为次要结果的处理方法 常见错误 数据填补 dataimputation 仅在以下情况下 相对小的缺失率 例如10 15 含有缺失值的变量对于所要研究的问题具有非常重要的意义 有合理的假设和结转技术 一般宜遵循保守原则不同填补方式产生的结论需进行敏感性分析 10 统计检验结论不当 差异性检验零假设 两组 或多组 总体均数间没有差别对立假设 两组 或多组 总体均数间有差别检验水准 常见错误 若 两组样本均数间的差异显著 总体均数不等 忘记有假阳性可能 若 两组样本均数间的差异不显著 总体均数相等 1尚不能说有差异 图1差异性试验置信区间示意图 2尚不能说有差异 3有差异 4有差异 C优 T优 试验组 对照组 T C 0 1非劣 图2非劣效性试验置信区间示意图 4尚不能下结论 2非劣 3非劣 5劣 试验组 对照组 T C C优 T优 0 1非优 图3非优效性试验置信区间示意图 2非优 3非优 4尚不能下结论 5优 试验组 对照组 T C C优 T优 0 1非劣 图4等效性试验置信区间示意图 2非优 3非劣 非优 等效 小结 医学论文常见统计学错误往往源于研究设计任何一项研究首先要明确定义目标总体 从目标总体选择对象要有细致的合格标准和排除标准 总体和标准不清晰 切勿匆忙上阵 基于 杂乱 对象的研究 一定不会有科学结论 小结 结局指标不是越多越好 主要指标只能一个 次要指标可以多于一个 但不能过多 结局指标过多 费力不讨好 即便出现阳性结果 往往是假阳性 经不起重复 小结 科学研究必须有对照 对照的选取与研究的假说有关 对照不恰当 研究没有好下场 样本量并非越大越好 不论干预性研究还是观察性研究 都要事先估算最小样本量 医学论文的 方法 部分必须有一段报告样本量及其确定的依据 依据不可靠 估算的样本量自欺欺人 小结 随机化是保证研究真实性的重要措施 将随机化当作 廉价名词 只说不做 或做而不严 不仅败坏科研道德 而且 往往导致研究失败 临床试验涉及人 无论研究对象还是研究者有意无意受心理因素的影响 盲法 是消弱此类影响的重要措施 研究终点的认定要尽量实施盲法 小结 医学研究中 量表的应用日益广泛 引进国外量表或自制量表均属严肃的学术研究 按一定程序引进或研制的量表才能作科研的测量工具 非正规量表收集的数据缺乏科学性 小结 数据分析的第一步必定是考察基线均衡与否 基线不均衡 没有可比性 设计要保证基线均衡 一旦不均衡 常用分层 匹配和回归等统计方法 小结 统计检验的结论并非绝对肯定 也非绝对否定 若在检验水准0 05拒绝零假设 可说 差异具有统计学意义 但仍有可能出错 若不能拒绝零假设 只能认为目前证据尚不足以支持 差异具有统计学意义 这一结论 不可因此而声称 无差异 小结 有时想说明新药不亚于常规药 可进行 非劣效检验 有时想说明新药等效于常规药 必须进行 等效检验 等效检验 包含一个非劣效检验和一个非优效检验 仅当既 非劣 又 非优 时 方能声称 等效 参考书 方积乾等 卫生统计学 第7版 人民卫生出版社 2012方积乾等 医学统计学与电脑实验 第4版 上