检验项目的临床效能评价概述

第四章检验项目标临床效能评价检验项目的临床效能评价概述第1页学习目标

检验项目标临床应用评价指标有哪些？检验项目标临床应用评价指标特点是什么？什么叫似然比？在检验项目标临床应用评价中有什么价值？几个试验联合应用时怎样进行评价？检验项目标临床应用评价标准有哪些？什么叫ROC曲线，它应用范围有哪些？2023/8/292检验项目的临床效能评价概述第2页

第四章检验项目标临床效能评价第一节检验项目临床效能评价内容和意义第二节检验项目临床效能评价研究设计第三节检验项目临床效能评价方法第四节提升检验项目效率方法2023/8/293检验项目的临床效能评价概述第3页

对一个检验项目尤其是新引进检验项目在临床应用时，除方法学评价外，还需从临床应用价值进行评价，即对该检验项目在临床诊疗和治疗决议中能起多大作用进行评价。

当准备在本单位开展此检验项目时，尚需进行适用性评价，即此项试验是否适合用于本单位及有没有条件或有没有必要开展此项目检验。第一节检验项目临床效能评价内容和意义2023/8/294检验项目的临床效能评价概述第4页第一节检验项目临床效能评价内容和意义一、检验项目临床效能评价意义二、检验项目临床应用证据评价标准2023/8/295检验项目的临床效能评价概述第5页一、检验项目临床效能评价意义方法学评价是了解检验项目其技术性能，确保方法准确可靠必须了解该项目标临床应用效能了解其对疾病诊疗和治疗影响和价值选择合理、可靠、有效临床检验项目正确判断检验结果对于某疾病诊疗贡献大小，从而确定和执行合理医疗决议

返回节目录2023/8/296检验项目的临床效能评价概述第6页二、检验项目临床应用证据评价标准任何一个检验项目用于临床之前都必须经过科学评价方法学评价及临床应用价值评价两个方面遵照循证医学(evidence-basedmedicine，EBM)标准循证医学标准在检验医学中应用，产生了循证检验医学(evidence-basedlaboratorymedicint,EBLM)2023/8/297检验项目的临床效能评价概述第7页二、检验项目临床应用证据评价标准循证检验医学就是在大量可靠临床应用资料和经验基础上,研究检验项目标临床应用价值为临床诊疗、疗效观察、病情转归提供最有效、最实用、最经济检验项目及最合理组合2023/8/298检验项目的临床效能评价概述第8页（一）真实性评价1．被评价试验和标准诊疗法进行盲法对比研究标准诊疗法是指对某疾病诊疗最可靠方法，通常又称“金标准”只有用标准诊疗法才能正确诊疗患者是否患有某病或不患有某病，也只有这么，才能正确评价某一试验临床价值2023/8/299检验项目的临床效能评价概述第9页（一）真实性评价1．被评价试验和标准诊疗法进行盲法对比研究“金标准”通常指是病原学检验、细胞学检验、活体组织检验、尸检、特殊影像检验、长久随访结果、临床教授共同制订被公认最新诊疗标准检验方法，即使是公认参考方法，在临床应用评价时，不要简单看作为“金标准”，务必注意与标准诊疗法进行比对，为防止产生偏倚，必须采取盲法。2023/8/2910检验项目的临床效能评价概述第10页（一）真实性评价2．研究对象选择恰当首先是病例组，必须明确诊疗，各型病例早期、中期、晚期病例治疗前、治疗后病例经典及不经典病例如选择偏倚，必定产生不正确结论，如肿瘤标志物检测，仅选取住院晚期患者，诊疗敏感度必定预计偏高。2023/8/2911检验项目的临床效能评价概述第11页（一）真实性评价2．研究对象选择恰当对照组一定要选经标准诊疗法诊疗为无该病患者假如选择健康人作对照组，特异度预计必定偏高所以应选择无目标疾病病例，尤其选与目标疾病易病例同时性别、年纪应与病例组相近这么对该试验评价才比较客观按统计学要求，病例组、对照组样本量应30例以上2023/8/2912检验项目的临床效能评价概述第12页（一）真实性评价3．参考区间确实定恰当参考区间如是作者自己确定，则要考查其正常人群选择、样本数量确实定、测定方法可靠性、数据处理等方面是否正确如是应用文件资料，则应考虑是否适合当地域，有没有进行验证。因为参考区间上下限确定不适当，必定影响到对测定结果临床解释，使该试验临床应用评价发生偏倚。2023/8/2913检验项目的临床效能评价概述第13页

4．验证某试验应用于另一组病例含有相同真实性

实际上就是考查其复现性即对原评价进行验证问题（一）真实性评价2023/8/2914检验项目的临床效能评价概述第14页（二）临床应用意义评价

１．有敏感度、特异度或阳性似然比计算或提供了运算数据

敏感度、特异度是临床应用评价两个基本指标阳性似然比指是真阳性与假阳性比值该试验阳性时患该病与不患该病概率比值，是敏感度、特异度综合指标注意：统计学上判断不能代替临床应用意义评价2023/8/2915检验项目的临床效能评价概述第15页

2．分层似然比计算因为不一样测定值，其敏感度、特异度是不一样做ROC曲线时，必定要做分层统计（二）临床应用意义评价2023/8/2916检验项目的临床效能评价概述第16页（三）适用性评价适用性评价包含：①该试验可否推广应用②患者验前概率能否合理估算③验后概率是否对患者处理有帮助2023/8/2917检验项目的临床效能评价概述第17页（三）适用性评价

返回章目录仪器设备、试剂费用多少、起源、操作难度及效率、效益、效能、不良反应、对患者危险性、患者依从性首先要评价该项目是否有利于疾病诊疗、治疗和预防策略，得到最正确健康服务结果其次考虑经济效益。若某检验项目即使技术和诊疗性能好，含有好临床效能，但所需费用昂贵而患者难于接收，也降低了其实用性

2023/8/2918检验项目的临床效能评价概述第18页第二节检验项目临床效能评价研究设计

一、确定研究目标二、样本总体和抽样计划三、金标准和评价指标四、估算样本量和防止偏倚2023/8/2919检验项目的临床效能评价概述第19页

①评价项目

②观察内容

③该研究临床实际意义

④这是一个新项目、新应用成熟项目

还是已应用成熟项目

⑤是否已经有类似或能够与之竞争项目

一、确定研究目标

返回节目录2023/8/2920检验项目的临床效能评价概述第20页二、样本总体和抽样计划

研究样本总体要考虑患者分布特征比如：人口统计学、症状体征、合并症以及疾病阶段、程度、部位等也不应仅局限于一个单位或者一个地域，应包含不一样临床机构或地理位置患者。

2023/8/2921检验项目的临床效能评价概述第21页二、样本总体和抽样计划用于评价受试对象包含两组即被金标准证实患者作为病例组金标准证实为未患该病人作为对照组对照组能够是健康者或其它疾病患者

2023/8/2922检验项目的临床效能评价概述第22页

抽样时需要考虑不一样研究阶段

1.探索研究阶段对每个患者采取回顾性抽样，其真实疾病从试验统计和疾病登记资料得到

2.挑战研究阶段仔细考虑目标患者总体特征频谱，重点考虑目标患者病理学、临床表现、合并症

3.临床研究阶段患者样本必须真实代表样本总体

二、样本总体和抽样计划

返回节目录2023/8/2923检验项目的临床效能评价概述第23页三、金标准和评价指标金标准(goldstandard)是指被公认诊疗疾病最可靠方法，病理诊疗经常被作为肿瘤诊疗金标准金标准能正确地域分受试者患病是否，若金标准选择不妥，可能会造成错误分类，影响对该临床检验项目标正确评价

2023/8/2924检验项目的临床效能评价概述第24页三、金标准评价指标灵敏度和特异度是最基本准确度指标还有综合指标：准确度、尤登指数、似然比考虑了患病率预测值直观明确受试者工作特征曲线(ROC曲线)

返回节目录2023/8/2925检验项目的临床效能评价概述第25页四、估算样本量和防止偏倚

新检验项目是否含有临床意义，必须与金标准诊疗作对比每个检验项目标敏感度及特异度均是稳定指标按照预计总体率样本含量估算方法，计算病例组样本含量n1，对照组样本含量n2,△为允许误差

2023/8/2926检验项目的临床效能评价概述第26页四、估算样本量和防止偏倚经过选择可靠金标准严格地选择研究对象以盲法同时用被评价检验项目测试研究对象以防止信息偏倚同时应注意统计学正确使用

返回章目录2023/8/2927检验项目的临床效能评价概述第27页第三节检验项目临床效能评价方法

一、敏感度和特异度二、预测值和似然比三、ROC曲线分析四、临床应用评价指标综合分析2023/8/2928检验项目的临床效能评价概述第28页

第三节检验项目临床效能评价方法检验项目临床效能评价指标：

①敏感度②特异度

③预测值(含阳性预测值及阴性预测值)

④诊疗指数

⑤诊疗效率(含阳性似然比及阴性似然比)2023/8/2929检验项目的临床效能评价概述第29页

金标准

有病无病累计

诊疗性阳性真阳性（a）假阳性（b）a+b

试验阴性假阴性（c）真阴性（d）c+d

累计a+c

b+d

a+b+c+d

一、敏感度和特异度1．四格表应用2023/8/2930检验项目的临床效能评价概述第30页

2．评价指标计算

敏感度(sensitivity，SEN)=a／(a+c)

特异度(specificity，SPE)=d／(b+d)

阳性预测值=a／(a+b)

阴性预测值=d／(c+d)

诊疗指数=敏感度+特异度

诊疗效率(准确度)=(a+d)／(a+b+c+d)100%

阳性似然比=敏感度/(1－特异度)

阴性似然比=(1－敏感度)／特异度

一、敏感度和特异度2023/8/2931检验项目的临床效能评价概述第31页一、敏感度和特异度2．评价指标计算敏感度又称真阳性率(truepositiverate，TPR)是诊疗试验能将实际有病人正确地判为患者能力，即患者被判为阳性概率反应检出患者能力，该值越大，漏诊病例(漏诊率)越少

2023/8/2932检验项目的临床效能评价概述第32页一、敏感度和特异度2．评价指标计算特异度又称真阴性率(truenegativerate，TNR)在金标准诊疗为“无病”例数中，某检验项目结果为阴性百分比，真阴性例数越多，则特异度越高，误诊病例(误诊率)越少2023/8/2933检验项目的临床效能评价概述第33页一、敏感度和特异度2．评价指标计算敏感度与特异度是评价一项检验项目真实性两个基本指标从理论上讲，一项理想检验项目其灵敏度、特异度最好均为100％即假阳性与假阴性均为零，无一漏诊与误诊实际上灵敏度和特异度是矛盾统一体，伴随诊疗分界点改变而改变2023/8/2934检验项目的临床效能评价概述第34页病例组诊疗界点对照组漏诊率(β)误诊率(α)特异度（1-α）灵敏度（1-β）图4-1灵敏度与特异度关系

2023/8/2935检验项目的临床效能评价概述第35页

测定值D正常人患者频数DFNFP测定值正常人患者频数TNTP3．诊疗分界当健康分布与患者分布没有重合,取中间一点(D点)分界值假阳性和假阴性均为O。这是一个理想模式，当前没有这么检验项目，许多检验项目健康人与患者结果分布有交叉一、敏感度和特异度图4-2理想检验项目健康群体与患者群体分布图4-3实际检验项目健康群体与患者群体分布2023/8/2936检验项目的临床效能评价概述第36页一、敏感度和特异度分界值高低直接影响检验项目诊疗性试验评价指标在这种情况下，普通是先初步确定几个分界值分别计算真阳性、真阴性、假阳性、假阴性数值深入计算诊疗灵敏度、诊疗特异度等指标最终依据早期诊疗、疗效观察、流行病学调查等各种不一样目确实定分界值2023/8/2937检验项目的临床效能评价概述第37页一、敏感度和特异度4．尤登指数尤登指数(Youden’sindex)又称正确指数是指灵敏度和特异度之和减去1是综合评价真实性指标，理想试验应为l计算公式为：尤登指数=(灵敏度+特异度)－1

返回节目录2023/8/2938检验项目的临床效能评价概述第38页二、预测值和似然比1．似然比(LR)表示是患某种疾病患者所测定不一样结果范围中患该病与不患该病比值只有阳性、阴性结果时，普通分阳性似然比及阴性似然比两种2023/8/2939检验项目的临床效能评价概述第39页二、预测值和似然比1．似然比(LR)阳性似然比(+LR):真阳性率(TPR)与假阳性率(FPR)比值当就诊者该诊疗性试验结果为阳性时，其患病与不患病机会比,显然阳性似然比值越高检验结果阳性时，诊疗为某病概率越大，该检测方法确诊疾病能力就越强。阳性似然比=真阳性率/假阳性率=灵敏度/（1-特异度）2023/8/2940检验项目的临床效能评价概述第40页二、预测值和似然比1．似然比(LR)阴性似然比(-LR):假阴性率(FNR)与真阴性率(TNR)比值当某就诊者该诊疗性试验结果为阴性时，其患病与不患病机会比。显然阴性似然比越小，则检验结果阴性时，患某病概率越小，该检测方法排除疾病能力就越好阴性似然比=假阴性率/真阴性率=（1-灵敏度）/特异度2023/8/2941检验项目的临床效能评价概述第41页二、预测值和似然比2.预测值(predictivevalue，PV)是表示试验能做出正确判断概率，(预告值)又分为：阳性预测值(positivepredictivevalue,PPV)

阴性预测值(negativepredictivevalue,NPV)2023/8/2942检验项目的临床效能评价概述第42页阳性预测值是指真阳性人数

占试验结果阳性人数百分比，

表示试验结果阳性者属于真病例概率

阴性预测值是指真阴性人数占试验结果阴性人数百分比，表示试验结果阴性者属于非病例概率

二、预测值和似然比2.预测值(PV)2023/8/2943检验项目的临床效能评价概述第43页试验灵敏度愈高，阳性预测值就越高；

特异度越高试验，阴性预测值就越好。

注意：检验项目标灵敏度和特异度并不能完全决定检验阳性预测值。与人群某病患病率有很大关系。

2.预测值(PV)二、预测值和似然比

返回节目录2023/8/2944检验项目的临床效能评价概述第44页三、ROC曲线分析

ROC是受试者工作特征曲线(receiveroperatingcharacteristiccurve,ROC)又称相对工作特征曲线原来是雷达屏幕上经过飞行物回响来判断飞行物一个方法做临界值判断及不一样试验临床价值比较

2023/8/2945检验项目的临床效能评价概述第45页三、ROC曲线分析首先要将测定结果分层计算其敏感度及特异度普通要求最少有5组连续分组数据。然后以真阳性率(敏感度)为纵坐标，假阳性率(1－特异度)为横坐标，将各层结果绘图，连接各点使成曲线其中离左上角最近一点，即其临界值2023/8/2946检验项目的临床效能评价概述第46页图4-4ROC曲线图三、ROC曲线分析2023/8/2947检验项目的临床效能评价概述第47页ROC曲线图还可比较两种诊疗试验临床价值。其标准是曲线下覆盖面积越大临床价值越大。甲法比乙法临床价值要大三、ROC曲线分析图4-5ROC比较示意图

2023/8/2948检验项目的临床效能评价概述第48页ROC曲线临床应用

(1)选择最正确分界值：取ROC曲线上拐点作为分界值将会得到最大准确性，不过必须结合似然比、尤登指数以及筛查和确诊等试验目标综合确定

(2)诊疗效率分析：利用曲线下面积来评价不一样检验项目或不一样检测方法对某种疾病诊疗价值

(3)对检验结果评价：灵敏度和特异度伴随诊疗分界点升高或降低而改变三、ROC曲线分析2023/8/2949检验项目的临床效能评价概述第49页临床检验中若有多个独立同类检验项目结果

合并成sROC曲线(summaryROCcurve,sROC)

该法与Meta分析方法原理相同

Meta分析目标是对多个同类独立研究结果进行汇总和合并分析，以到达增大样本含量，提升检验效能目标当多个研究结果不一致或都无统计学意义时，用Meta分析可得到愈加靠近真实情况统计分析结果

三、ROC曲线分析

返回节目录2023/8/2950检验项目的临床效能评价概述第50页四、临床应用评价指标综合分析

特异度、灵敏度，两个最主要指标

其它评价指标都可用它们来推导缺乏这两个指标，该检验项目无法进行评价在撰写和评价论文，在引进或评价一项新检验项目，这两个指标必须具备可供分析资料

2023/8/2951检验项目的临床效能评价概述第51页

阳性及阴性预测值指导临床诊疗时比灵敏度、特异度更直观、更轻易了解指标，应用广泛当患者检验结果为阳性时，必须参考该检验项目标阳性预测值，结果为阴性时必须参考其阴性预测值在试验设计中，疾病组与对照组样本组成有所改变时，能够影响到预测值大小，造成误解。四、临床应用评价指标综合分析2023/8/2952检验项目的临床效能评价概述第52页

准确性、尤登指数及诊疗效率是综合灵敏度、特异度计算以往认为这些指标对评价一个检验项目有很好，实际上是很有限如甲、乙两个试验灵敏度分别为80％、95％，而特异度分别为95％、80％，上述指标结果是相同或相近[尤登指数=(0.8+0.95)-1=0.75]，但这两个试验临床应用价值是不一样，甲试验可能在确诊时更有价值，乙试验用于筛查更加好

四、临床应用评价指标综合分析

2023/8/2953检验项目的临床效能评价概述第53页

似然比表示是在某一检验项目标某个数值范围内患有或不患有某种疾病概率似然比是将灵敏度及特异度很好结合起来指标。阳性似然比数值越大，当试验结果阳性时，诊疗某病可能性越大阴性似然比数值越小，当试验正常时，患某病可能性越小四、临床应用评价指标综合分析

2023/8/2954检验项目的临床效能评价概述第54页

四、临床应用评价指标综合分析

返回章目录ROC分析方法当前公认评价准确度标准方法在循证医学、临床试验、临床检验、统计模型好坏判别等方面含有十分主要应用价值2023/8/2955检验项目的临床效能评价概述第55页第四节提升检验项目效率方法

一、选择患病率高人群二、采取联合试验方法2023/8/2956检验项目的临床效能评价概述第56页

检验项目标灵敏度与特异度是相对固定人群患病率水平对一项检验项目阳性预测值影响却很大假如将一项检验项目用于患病率低人群，则阳性预测值较低若将其用于高危人群，则可显著提升阳性预测值一、选择患病率高人群

返回节目录2023/8/2957检验项目的临床效能评价概述第57页二、采取联合试验方法1．并联试验(paralleltest)又称平行试验只要一个试验是阳性即判断“异常”，并联试验提升了敏感度，降低了特异度并联试验敏感度=敏感度甲+(1－敏感度甲)×敏感度乙

并联试验特异度=特异度甲×特异度乙

2023/8/2958检验项目的临床效能评价概述第58页二、采取联合试验方法1．并联试验(paralleltest)又称平行试验如有