系统评价Meta分析常用质量评价工具简介

.,系统评价/Meta分析常用质量评价工具简介,杜亮华西期刊社/中国循证医学中心2013.5.18,.,提纲,一、背景二、RCT的质量评价工具三、观察性研究的质量评价工具四、非随机实验性研究的质量评价工具五、诊断性研究的质量评价工具六、动物实验的质量评价工具七、SR/Meta分析（MA）的质量评价工具,.,一、背景1.1为什么要进行质量评价？,真假难辨诚信、政策、监督好坏可评质量评价工具,造假,造假,垃圾,垃圾,+,=？,+,=？,.,1.2质量评价评什么？,什么决定研究的好坏？其结果接近真实情况，稳定偏倚程度小（可能出现在研究设计、实施、结果分析的整个过程）集中反映在研究报告的方法学部分高质量报告高质量研究,.,1.3质量的定义,试验设计产生无偏倚结论的可能性（内部真实性）JadadAR，牛津大学，1996在设计与研究过程中反映结论真实性的一系列因素，这些因素与临床试验的内部真实性、外部真实性和统计分析有关VerhagenAP，荷兰马斯特里赫特大学，1998,.,1.4相关名词,真实性是指研究的设计和实施中防止系统误差或偏倚的程度，主要包括内部真实性与外部真实性内部真实性是指单个研究结果接近真实值的程度，即受各种偏倚因素，如选择偏倚、实施偏倚、失访偏倚及测量偏倚的影响情况。外部真实性又称适用性或外部有效性，主要指研究结果是否可以应用于研究对象以外的其他人群，即结果的使用价值与推广应用的条件，主要与研究对象的特征、干预措施和结局的选择标准有关。,.,1.4相关名词,对偏倚的认识是质量评价的核心偏倚（bias）又称系统误差，是指研究的结果或推论偏离真实值，或导致这种偏离的过程，也可以说在资料收集、分析、解释或发表过程中，能够导致结论系统地与真实值有所不同的任何趋势选择偏倚、实施偏倚、损耗偏倚、测量偏倚、报告偏倚、其他偏倚,.,1.4相关名词,质量评价（qualityassessment）是评估单个研究在设计、实施、结果分析整个过程中可能出现各种偏倚的程度。质量评价工具则是依据这些可能出现的偏倚的各个方面设计的。主要有3种类型：条目（component/items）一览表或清单（checklist）量表（scale）,.,1.5临床流行病学研究设计分类,是否由研究者分配暴露,试验性研究（是）,观察性研究（否）,是否随机分配,是否设立比较组,非随机对照试验（否）,随机对照试验（是）,分析性研究（是）,描述性研究（否）,同期对照试验,非同期对照试验,平行试验,交叉试验,队列研究（暴露结局）,病例对照研究（暴露结局）,横断面研究,监测,个案或病例系列报告,.,二、RCT的质量评价工具,RCT是实验性研究设计中的“金标准”AHRQ研究显示，涉及RCT的评价工具共20种量表、11种清单及1种组成部分的评价工具和7类指导性文件RCT：采用随机分配方法（随机数字表、计算机随机序列、抛硬币法等）将受试者分入不同处理组。CCT：采用半随机分配方法（按入院顺序、住院号、研究对象生日的奇偶）分配到不同处理组。,.,2.1Cochrane偏倚风险评估工具CJEBM干预类SR中67.6%使用,.,2.2Jadad量表JadadscaleCJEBM干预类SR中12.1%使用,1996年由Jadad等发布最初目的是为了评价疼痛治疗的RCT质量，从随机方案及其隐匿、盲法、退出与失访病例的原因及数量3方面进行评价采用0-5分计分法，2分为低质量，3分为高质量优点：简单明了，直接评价经验证的、与试验效应估计中的偏倚有直接关系的试验特征缺点：存在诸多不组，如未考虑分配隐藏推荐：将Jadad量表与隐蔽分组的评价结合起来,.,2.2Jadad量表Jadadscale,.,2.3Delphi清单,由马斯特里赫特大学Verhagen及其同事1998年依据Maastricht和Chalmers量表，遵照Delphi法制作针对RCT的内部有效性、外部有效性和统计分析3个方面共8个条目，其中第1条又分为两个部分采用“是”、“否”、“不清楚”进行判断缺点：基于专家共识而非实验数据,.,2.3Delphi清单,.,2.4PEDro量表PhysiotherapyEvidenceDatabase物理治疗证据数据库，1999，乔治中心的物理治疗循证中心,.,2.5Chalmers量表,1981年由Chalmers等提出分一般情况记录、研究方案、统计分析、结果陈述4部分，36个条目，均为经验条目一般情况不参与记分，研究方案、统计分析、结果3部分按6：3：1权重记分，共27个条目，总分100分缺点：实施繁琐、耗时；部分内容与报告质量混淆,.,三、观察性研究的质量评价工具,非实验性研究（队列、病例-对照、横断面），未加干预，允许事件自然发展与RCT相比，更易受（选则性）偏倚风险影响（横断面病例-对照队列）2005年，剑桥大学SimonSanderson等研究显示：86种观察性研究质量评价工具：19%病例-对照；27%队列；7%横断面45%病例-对照/队列；15%3种设计2010年，明尼苏达大学TatyanaShamliyan等研究显示：96种观察性研究质量评价工具（46量表，51清单）：21.88%队列；13.54%病例-对照；5.21%横断面,.,3.1NOS量表TheNewcastle-OttawaScale,纽卡斯尔-渥太华量表（TheNewcastle-OttawaScale,NOS）3大块（人群选择、可比性、暴露评价或结果评价），8个条目采用星级系统的半量化原则，满分队列研究为13颗星，病例-对照研究9颗星被Cochrane协作网的非随机研究方法学组用于培训，并被推荐使用。免费下载网址http:/www.ohri.ca/programs/clinical_epidemiology/oxford.asp,.,3.1.1队列研究NOS量表,.,3.1.1队列研究NOS量表,.,3.1.2病例-对照研究NOS量表,.,3.1.2病例-对照研究NOS量表,.,3.2横断面研究的质量评价工具JBI量表JBIPACES(JoannaBriggsInstitute,PracticalApplicationofClinicalEvidenceSystem)澳大利亚循证护理中心（1996年建立，31国设分中心，2004年复旦）的在线临床证据评鉴系统,.,3.3横断面研究AHRQ清单AgencyforHealthcareResearchandQuality,.,3.4横断面研究Combie量表1996年IainCrombie在ThePocketGuidetoCriticalAppraisal一书中提出,.,3.5经验总结、案例分析及专家意见JBI量表,.,四、非随机实验性研究的质量评价工具,并非所有的临床试验都可以设计成随机对照试验2003年，牛津大学J.J.Deeks等全面评价了2000年以前发表的非随机试验性研究评价工具：213种工具量表清单各占一半14种为最佳工具，其中6种可用于SR,.,4.1MINORS量表MethodologicalIndexforNon-randomizedStudies,.,4.1MINORS量表MethodologicalIndexforNon-randomizedStudies,.,五、诊断性研究的质量评价工具,诊断性试验评价运用诊断试验后对改善患者的治疗/预后效果，多采用随机对照设计，此时质量评价方法与RCT相同评价诊断试验的准确性,.,5.1QUADAS工具QualityAssessmentofDiagnosticAccuracyStudies,英国约克大学PennyWhiting等遵照Delphi法于2003年制定目前唯一经严格评价和验证的诊断性研究质量评价工具2008年被Cochrane协作网推荐为Cochrane诊断性试验准确性SR的质量评价标准,.,5.1QUADAS工具QualityAssessmentofDiagnosticAccuracyStudies,.,5.1QUADAS工具QualityAssessmentofDiagnosticAccuracyStudies,.,5.1QUADAS工具QualityAssessmentofDiagnosticAccuracyStudies,.,5.1QUADAS工具QualityAssessmentofDiagnosticAccuracyStudies,.,六、动物实验的质量评价工具,动物实验SR/MA的目的后效评估动物实验，回顾性比较动物模型是否使用适当；降低将动物实验所获结果引入临床的风险设计类型类似临床研究，多为RCT质量评价方法原则上可应用临床研究的相应方法特殊性：必须注重评价其可重复性和内部真实性,.,6.1STAIR清单TheInitialStrokeTherapyAcademicIndustryRoundtable,.,6.2CAMARADES清单CollaborativeApproachtoMetaAnalysisandReviewofAnimalDataFromExperimentalStroke,.,七、SR/MA的质量评价工具AMASTAR量表Ameasurementtoolfortheassessmentofmultiplesystematicreviews,2007年由荷兰VrijeUniversitet大学医学研究中心和研制加拿大渥太华大学的临流专家联合11个条目，条目形成基础：OQAQ（OverviewQualityAssessmentQuestionnaire）的10个条目SQAC（SacksQualityAssessmentChecklist）的24个条目文种偏倚、发表偏倚、灰色文献,.,7.1SR/MA