Meta分析在循证医学实践中应用

论文写作中注意事项1.格式2.图表3.综述4.不同研究论文书写要求5.中医术语和药名的规范6.统计术语问题第一页，共128页。论文写作中注意事项1.格式参考文献编号与正文中符号要对应，所有符号为英文状态下的半角符号。正文中所有符号为中文状态下符号，要有页码。标题要4级用小四号字宋体单行间距起止间以“~”表示，不可用“一”或“—”等。数字“0”不可为“o”。第二页，共128页。论文写作中注意事项2.图表统计表用三线表，要有标题、备注等。使用表格自动套用格式中简明表1作表，根据需要进行调整。标题放在表的上方。统计图标题放在图的下方，要有图例。不同统计结果使用不同的图。一篇论文中仅选其一。第三页，共128页。论文写作中注意事项3.综述要新，参考文献不少于50篇，近5年文献和国外文献分别不少于全部文献的30%。要有综要述。阐述的内容不少于全文的30%。系统综述按循证医学的要求，和传统综述有别。第四页，共128页。论文写作中注意事项4.不同研究论文书写要求调查研究：严格按临床流行病学的要求进行，病例数不少于1000例，也可根据相关公式计算样本量，抽样方法等。统计多采用logistic回归分析方法。临床研究样本量要计算、随机方法用统计软件去做。论断标准要规范。要有CRF表，包括知情同意书。常用两组，用终未指标，阳性对照问题。实验研究除常用的设计要求之外，注意模型成功的标志、和中医证型的关系。被试因素标准化、指标的关联性。第五页，共128页。论文写作中注意事项5.中医术语和药名的规范辨证论治不可写成辩证论治证候不可写成症候或证侯，注意病、证、症的概念。仙灵脾应改为淫羊藿，山萸肉应改为山茱萸、龟板（版）应改为龟甲等。第六页，共128页。论文写作中注意事项6.统计术语问题P＞0.05表明两组比较差异无统计学意义。P≤0.05表明两组比较差异有统计学意义。P≤0.01表明两组比较差异有显著统计学意义。计量资料和计数资料如何统计？参数统计和非参数统计区别。多组间两两比较问题。第七页，共128页。第八页，共128页。第九页，共128页。目录一、概述二、Meta分析的定义三、Meta分析的统计目的四、Meta分析的统计过程五、分类变量的实例分析六、数值变量的实例分析七、有关Meta分析的讨论八、Meta分析的基本步骤九、Meta分析的操作过程第十页，共128页。20世纪60年代开始，在医学文献中，陆续出现了对多个独立研究的统计量进行合并的报道。76年G．V．Glass首先将合并统计量对文献进行综合分析研究的这类方法称为“Meta-Analysis”。一、概述第十一页，共128页。80年代末该方法传入我国，中文译名有荟萃分析，二次分析、汇总分析、集成分析等。但无论何种中文译名都有不足之处。因此，很多学者建议仍然使用“Meta分析”这一名称。一、概述第十二页，共128页。Meta-Analysisisasystematicreviewthatusesquantitativemethodstosummarizetheresults.

Meta分析是运用定量方法去概括（总结）多个研究结果的系统评价。《Evidence-BasedMedicine》--DavidSackett等，第247页的定义二、Meta分析的定义第十三页，共128页。Meta-Analysisisstatisticaltechniqueforassemblingtheresultsofseveralstudiesinareviewintoasinglenumericalestimate.Meta分析是文献评价中，将若干个研究结果合并成一个单独数字估计的统计学方法。《TheCochraneLibrary》第3页的定义。二、Meta分析的定义第十四页，共128页。三、Meta分析的统计目的第十五页，共128页。实例一第十六页，共128页。女童掌骨Ⅱ皮质厚度的11个研究

实例二第十七页，共128页。在医学研究中，传统的文献综述在处理同一问题的多个结果报道时，通常是平等（等权重方法）对待每个研究结果而得出结论。这种文献综述一般不进行文献评价，也不考虑文献的质量，主要是以某类结果文献数量的多少得出结论。传统文献综述的特点第十八页，共128页。传统文献评价的结果必然存在两个问题：一是多个研究的质量不相同；二是各个研究的样本含量的大小（权重）不相等。因此，传统文献综述的方法很难保证研究结果的真实性、可靠性和科学性，尤其当多个研究的结果不一致时，让人容易产生困惑或误解。传统文献综述的主要问题第十九页，共128页。对多个同类独立研究的结果进行汇总和合并分析，以达到增大样本含量，提高检验效能的目的，尤其是当多个研究结果不一致或都没有统计学意义时，采用Meta分析可得到更加接近真实情况的统计分析结果。Meta分析的统计目的第二十页，共128页。在系统评价（systematicreview）中，当数据资料适合使用Meta分析时，用Meta分析可以克服传统文献综述的两大问题，其分析结果的可靠性更高；当数据资料不适合做Meta分析时，系统评价只能解决文献评价的问题，不能解决样本含量的问题，因此，对其分析结论应慎重。Meta分析与系统评价（一）第二十一页，共128页。没有按系统评价标准实施严格文献评价的Meta分析结果，其纳入文献的质量及同质性未必达到了合并统计量的条件。因此，这类研究即使用了Meta分析也不一定是系统评价的研究，更难说是高质量的研究。Meta分析与系统评价（二）第二十二页，共128页。四、Meta分析的

统计分析过程第二十三页，共128页。1.计算每个研究的效应量及方差2.计算每个研究效应量的权重3.计算合并效应量4.异质性检验5.合并效应量的可信区间6.合并效应量的检验Meta分析计算的主要步骤：第二十四页，共128页。1．单个研究的统计量根据资料类型选择单个研究的统计量di

：（1）分类变量可选择的统计量比值比，OR（oddsratio）相对危险度，RR（relativeRisk）率差（绝对危险度），RD（ratedifference）（2）数值变量可选择的统计量加权均数差（WMD）即为两均数的差值标准化均数差（SMD）即两均数的差值再除以合并标准差的商。用于描述单个研究的实验结果，其结果解释与常规统计描述指标相同。第二十五页，共128页。2．单个研究的方差根据资料类型选择单个研究的统计量di的方差Var（di）

单个研究统计量di的计算方法确定后，其方差的计算方法也随之确定。方差可用于可信区间和假设检验的计算。第二十六页，共128页。3．异质性检验与异质性分析按统计原理，只有同质的资料才能进行合并或比较等统计分析，反之，则不能。因此，Meta分析过程需要对多个研究的结果进行异质性分析，尽可能地消除导致异质的原因，使之达到同质。第二十七页，共128页。异质性检验异质性检验（testsforheterogeneity）又称同质性检验（testsforhomogeneity）用假设检验的方法检验多个独立研究是否具有异质性（同质性）。第二十八页，共128页。若异质性检验检验结果为P>0.10时，多个研究具有同质性，可选择固定效应模型（fixedeffectmodel）；若多个研究结果为P≤0.10时，多个研究不具有同质性，首先应进行异质性分析和处理，若仍无法消除异质性的资料，可选择随机效应模型（randomeffectmodel）。异质性检验第二十九页，共128页。I2（I?）及计算在Revman5.0及以后的软件中，出现了新的异质性指标，即I2（I?）。其计算公式如下：式中的Q为异质性检验的卡方值2，K为纳入Meta分析的研究个数。第三十页，共128页。I2（I?）的意义在Revman中，I2是一个衡量多个研究间异质程度大小的指标。这个指标用于描述由研究间所致的变异（而非抽样误差所引起的变异）占总变异的百分比。在Cochrane系统评价中，只要I2不大于（≤）50%，其异质性可以接受。第三十一页，共128页。异质性分析与处理的方法当异质性检验出现P≤0.10时，首先应找出产生异质性的原因，如疗程长短、用药剂量、病情轻重、对照选择等是否相同。由上述原因引起的异质性，可使用亚组分析（subgroupanalysis）、Breslow-Day法和回归近似法。第三十二页，共128页。亚组分析（subgroupanalysis）根据Cochrane系统评价要求，而在系统评价的计划书中尽可能地对一些重要的亚组间差异进行叙述。也就是说对重要的亚组分析，应在计划书中加以说明。此外，在同一个系统评价中，不提倡使用太多的亚组分析。第三十三页，共128页。4．多个实验效应的合并

将多个独立研究的结果合并（或汇总）成某个单一的效应量（effectsize）或效应尺度（effectmagnitude），即用某个指标的合并统计量，以反映多个独立研究的综合效应。第三十四页，共128页。合并统计量的计算当多个独立研究的例数不等时，它们的综合效应不等于这多个单独效应的平均数。如三个均数的总均数不等于这三个均数之和除以3。所以，怎样合理的对多个独立研究效应进行合并，是Meta分析统计过程的主要问题之一。第三十五页，共128页。合并统计量的两种统计模型

固定效应模型（fixedeffectmodel）：若多个研究具有同质性（无异质性）时，可使用，可使用固定效应模型。随机效应模型（randomeffectmodel）：若多个研究不具有同质性时，先对异质原因进行处理，若异质性分析与处理后仍无法解决异质性时，可考虑使用随机效应模型。第三十六页，共128页。（1）分类变量（category,dichotomous）固定效应模型，指标RR、OR

（1）Mantel-Haenzel法

（2）

Peto法随机效应模型，指标RR、OR

如:DerSimonian&Laird（D-L）法第三十七页，共128页。（2）数值变量（continuous）固定效应模型

（1）WMD，加权均数差法

（WeightedMeanDifference）（2）SMD，标准化均数差法

（StandardisedMeanDifference）

随机效应模型，D-L法第三十八页，共128页。常用Meta分析方法一览表第三十九页，共128页。关于随机效应模型随机效应模型一种对异质性资料进行Meta分析的方法，但是，该法不能控制混杂、也不能校正偏倚或消除产生异质性的原因。目前，随机效应模型多采用D-L法（DerSimonian&Laird法）。第四十页，共128页。关于随机效应模型D-L法是通过增大小样本资料的权重，减少大样本资料的权重来处理资料间的异质性，而这种处理存在着较大风险。通常小样本资料往往质量较差，偏倚较大，而大样本资料往往质量较好，偏倚较小。因此，经随机效应模型处理的结果，可能削弱了质量好的大样本信息，增大了质量差的小样本信息，故应谨慎使用随机效应模型，对其结论也应当较为委婉。第四十一页，共128页。5、合并效应量的检验

用假设检验（hypothesistest）的方法检验多个独立研究的总效应量（效应尺度）是否具有统计学意义，其原理与常规的假设检验完全相同。两种方法：①u检验（Ztest）②卡方检验（Chisquaretest）第四十二页，共128页。根据z或（u）值或卡方值得到该统计量下概率（P）值。若P≤0.05，多个研究的合并效应量有统计学意义；若P＞0.05，多个研究的合并效应量没有统计学意义。5、合并效应量的检验第四十三页，共128页。6、合并效应量的可信区间可信区间（confidenceinterval，CI）是按一定的概率估计总体参数（总体均数、总体率）所在的范围（区间），如：95%的CI，是指总体参数在该范围（区间）的可能性为95%。可信区间主要用于估计总体参数和假设检验。第四十四页，共128页。在Meta分析中，常用可信区间进行假设检验，95%的可信区间与为0.05的假设检验等价，99%的可信区间与为0.01的假设检验等价。此外，森林图即是根据各个独立研究的95%可信区间及合并效应量的的95%可信区间绘制的。6、合并效应量的可信区间第四十五页，共128页。OR与RR的可信区间若选择OR或RR为合并统计量时，其95%的可信区间与假设检验的关系如下：若其95%CI包含了1，等价于P>0.05，即合并统计量无统计学意义。若其95%CI的上下限均大于1或均小于1，等价于P<0.05，即合并效应量有统计学意义。第四十六页，共128页。WMD和SMD的可信区间若选择WMD或SMD为合并统计量时，其95%CI与假设检验的关系如下：若其95%CI包含了0，等价于P>0.05，即合并统计量无统计学意义。若其95%CI的上下限均大于0或均小于0，等价于P<0.05，即合并效应量有统计学意义。第四十七页，共128页。五、分类变量的实例分析

第四十八页，共128页。单个分类变量的研究数据分类变量（category,dichotomous）的单个研究的统计量di，可选择OR、RR或RD，四格表数据如下表第四十九页，共128页。K研究的分类变量资料整理第五十页，共128页。实例一第五十一页，共128页。OR和RR的森林图OR和RR的森林图（forestplots），无效线竖线的横轴尺度为1，每条横线为该研究的95%可信区间上下限的连线，其线条长短直观地表示了可信区间范围的大小，线条中央的小方块为OR值的位置，其方块大小为该研究权重大小。若某个研究95%可信区间的线条横跨为无效竖线，即该研究无统计学意义，反之，若该横线落在无效竖线的左侧或右侧，该研究有统计学意义。第五十二页，共128页。例一的Revman5.12森林图（M-H法）第五十三页，共128页。例一的Revman5.12森林图（Peto法）第五十四页，共128页。漏斗图及用途漏斗图（funnelplots）最初是用每个研究的处理效应估计值为X轴，样本含量的大小为Y轴的简单散点图（scatterplots）。对处理效应的估计，其准确性是随样本含量的增加而增加，小样本研究的效应估计值分布于图的底部，其分布范围较宽；大样本研究的效应估计值分布范围较窄，当没有发表偏倚时，其图形呈对称的倒漏斗状，故称之为“漏斗图”。第五十五页，共128页。漏斗图的用途漏斗图主要用于观察某个系统评价或Meta分析结果是否存在偏倚，如发表偏倚或其他偏倚。如果资料存在偏倚，会出现不对称的漏斗图，不对称越明显，偏倚程度也就越大。漏斗图的不对称性主要与发表偏倚有关，但也可能存在其他原因。第五十六页，共128页。漏斗图不对称的主要原因导致漏斗图不对称的主要原因有：选择性偏倚（Selectionbias）发表偏倚（Publicationbias）语言偏倚（Languagebias）引用偏倚（Citationbias）重复发表偏倚（Multiplepublicationbias）等等第五十七页，共128页。例一的Revman5.12漏斗图（FunnelPlot）第五十八页，共128页。六、数值变量的实例分析

第五十九页，共128页。单个数值变量的研究数据数值变量（continuous）的单个研究的统计量di，可选择WMD和SMD法，单个研究的数据如下表第六十页，共128页。K研究的数值变量资料整理第六十一页，共128页。女童掌骨Ⅱ皮质厚度的11个研究

实例二第六十二页，共128页。1、单个效应量及方差计算目前，数值资料的单个研究，主要使用加权均数差WMD和标准化均数差SMD来描述其效应量。第六十三页，共128页。WMD和SMD的森林图WMD和SMD的森林图，无效线竖线的横轴尺度为0，每条横线为该研究的95%可信区间上下限的连线，其线条长短直观地表示了可信区间范围的大小，线条中央的小方块为WMD或SMD值的位置，其方块大小为该研究权重大小。若某个研究95%可信区间的线条横跨为无效竖线，即该研究无统计学意义，反之，若该横线落在无效竖线的左侧或右侧，该研究有统计学意义。第六十四页，共128页。例二的Revman5.12森林图（WMD法）第六十五页，共128页。例二的Revman5.12漏斗图（FunnelPlot）第六十六页，共128页。目前，Meta分析的统计方法尚不够完善，还不能满足各种资料和设计方法合并需要，如多个均数比较、等级资料比较时，仍无成熟的Meta分析方法。此外，对Meta分析的争论也较多，如：对固定与随机效应模型的争论、权重（W）计算的不同方法等。七、有关Meta分析的讨论第六十七页，共128页。虽然，这些讨论不影响它在临床医学中的应用，但是也提示我们，循证医学研究和实践工作不但需要有很好的临床医学知识，而且也需要有良好的临床流行病学、生物统计学、卫生经济学的基础知识。七、有关Meta分析的讨论第六十八页，共128页。八、ReviewManager5.2实例操作讲解ReviewMannager软件简介实例详解软件操作步骤森林图及漏斗图结果分析第六十九页，共128页。ReviewManager软件简介ReviewManager是Cochrane协作网出品的免费Meta分析软件，它和Cochrane的Archie数据库一起组成Cochrane信息管理系统（CochraneInformationManagementSystem,IMS）。注册成为Cochrane评价小组的成员后，评价者就可利用Revman进行Cochrane系统评价的准备和维护，如不注册，也可应用该软件，但是完成后的评价不能进入Cochrane系统评价资料库。作为Cochrane协作网的系统综述协作软件，Revman已内置系统综述的模板，评价者只需要按要求填写即可。第七十页，共128页。ReviewManager5.2为例进行实例讲解通过Revman软件分析结果，评价针刺治疗慢性前列腺炎的有效性，数据及资料来源于中国知网，下载符合要求的RCT文献数4篇。资料提取如下：发表年份作者研究质量评估试验组对照组有效总数有效总数2011陈鹏典313230322011陈云龙283023302011文翠芬748446742011朱伟43462329第七十一页，共128页。新建一个系统评价,File--------New第七十二页，共128页。点击NEXT第七十三页，共128页。选择系统评价的类型：Interventionreview干预评价Diagnostictestaccuracyreview诊断试验精确评价Methodologyreview方法学评价Overviewofreviews同类综述评价第七十四页，共128页。输入系统评价的标题以针刺治疗慢性前列腺炎随机对照临床研究为例，在此输入：适合Meta分析的题材：Meta分析最适用于针对同一主题的RCT文献，这类文献的综合分析结果较为可靠，单个文献的质量直接决定了Meta分析的价值。第七十五页，共128页。选择系统评价的类型Fullreview全文，Protocol草案第七十六页，共128页。点击Finish,弹出如下界面：第七十七页，共128页。添加纳入研究点击大纲面板中Studiesandreference(研究和参考文献)旁边钥匙图标，再次点击Referencestostudies（研究的参考文献）旁的钥匙图标，在IncludedStudies（纳入的研究）点击鼠标右键，选择Addstudy（添加研究）。第七十八页，共128页。输入研究名称：作者+年份（作者与年份通过空格隔开）第七十九页，共128页。选择研究文献来源：Publisheddataonly(unpublishednotsought)已发表研究（未检索未发表）Publishedandunpublisheddata已发表和未发表研究Unpulisheddataonly未发表研究Publisheddataonly(unpublishedsoughtbutnotused)已发表研究（检索但未包含未发表研究）第八十页，共128页。添加研究识别码：如果经过注册的临床试验有唯一的注册码。这里我们不填加，继续点击Next第八十一页，共128页。继续添加下一个研究，选择Addanotherstudyinthesamesection点击Continue,依照上述方法，继续将剩余三项研究添加进去。第八十二页，共128页。将四项研究全部添加完成后，可以看到在Includedstydies里显示出了已经添加的研究：第八十三页，共128页。添加比较：在Dataandanalysises上点击鼠标右键，选择Addcomparison在弹出的对话框里输入比较名称，点击Next第八十四页，共128页。添加结局：这里选择Addanoutcomeunderthenewcomparion,点击Continue第八十五页，共128页。选择数据类型：Dichotomous二分类变量（定性资料），录入时需要输入各组发生该事件或结局的人数与各组的总人数。Continuous连续性变量（定量资料），录入时需要输入各组的例数，结局指标的均数及标准差。O-Eandvariance期望方差法资料，罕见情况下涉及。Genericinversevariance倒方差法资料，罕见情况下涉及。第八十六页，共128页。输入结局名称：针刺治疗前列腺炎临床随机对照研究文献的Meta分析组标签分别输入：治疗组和对照组第八十七页，共128页。选择分析方法：第八十八页，共128页。结果输出选项Totals中可以选择显示组和亚组或亚组或不显示组和亚组。Studyconfidenceinterval（研究置信区间）可设定计算纳入研究效应量的90%、95%、和99%的置信区间。Totalconfidenceinterval（总体置信区间）可设定计算总体效应量的90%、95%、和99%的置信区间。第八十九页，共128页。图表细节设定：Left/Rightgraphlabel可设定坐标轴下方试验组与对照组标签名称。Scale(效应范围)可改变坐标轴上的效应范围。SortBy(研究文献排列顺序)，可按照文献名称、年份、权重、效应量、偏移风险以及用户自定义顺序排序。第九十页，共128页。为结局添加相关研究这里选择Addstudydataforthenewoutcome为结局添加研究数据，点击Continue第九十一页，共128页。选择纳入研究按住Ctrl键，选择全部4个研究，点击Finish第九十二页，共128页。根据之前的表格，在表中输入数据：第九十三页，共128页。森林图和漏斗图绘制点击得到森林图，点击得到漏斗图。第九十四页，共128页。纳入研究的质量评价

AppraisingTheQualityOfTrialsInASystematicReview第九十五页，共128页。系统评价与Meta-分析的关系Meta-分析系统评价系统评价严格的质量评价（Criticalappraisal）内部真实性评价（internalValidity）外部真实性评价（externalvalidity）对将来研究的期望第九十六页，共128页。为什么要分析纳入研究的质量使用低质量方法可改变研究的结果；Meta-分析中纳入低质量研究有可能夸大治疗效果；评估偏倚对纳入研究的质量的影响及由此而造成的对系统评价的影响第九十七页，共128页。问题1：如果纳入研究的质量低，通过系统评价Meta分析可使疗效证据的强度提高？问题2：如果一个系统评价纳入的所有研究都是低质研究，则这是一个低质量的系统评价，其证据的强度也低？为什么要分析纳入研究的质量第九十八页，共128页。何处做质量分析在制订课题计划书的时候制定质量评价标准和质量评价方法；将研究纳入之后，资料提取之前即进行正式的质量评价；通常由两个评价人独立进行；第九十九页，共128页。哪些偏倚会影响研究结果选择性偏倚将观察对象分配到各组时发生；用随机分配和分配隐藏降低选择性偏倚；分配隐藏不当可过度估计疗效0%-47%。第一百页，共128页。实施偏倚（PerformanceBias）发生于实施干预的过程；系统误差造成（沾染和干扰）；避免实施偏倚对研究者实施盲法；对观察对象实施盲法。如果不对观察对象实施盲法，可过度估计疗效达17%。哪些偏倚会影响研究结果第一百零一页，共128页。损耗偏倚AttritionBias失访/退出/丢失LossOfFollow-up/withDraw/dropOut采用Intention-to-treat的严格方法处理资料。哪些偏倚会影响研究结果第一百零二页，共128页。测量性偏倚DetectionBias发生于结果测量和结果分析时；对结果的影响：夸大疗效可达17%-35%；哪些偏倚会影响研究结果第一百零三页，共128页。偏倚来源及减少偏倚的措施选择性偏倚实施偏倚损耗偏倚测量偏倚随机分配分配隐藏盲法ITT分析盲法分组研究实施实施过程和随访结果测量第一百零四页，共128页。（一）随机抽样与随机分配的区别1.随机抽样指从研究人群中（总体），用随机方法抽取部份个体作为研究对象（样本）。每个个体都有同样的机会被抽中。如何评价纳入研究质量2.随机分配指将所有符合纳入标准的观察对象用随机方法分配到试验组和对照组。每个观察对象都有同样的机会被分配到两个组。第一百零五页，共128页。随机抽样与随机分配（组）的关系第一百零六页，共128页。如何评价纳入研究质量随机方法正确的随机方法计算机随机随机数字表掷骰子，抛钱币问题你认为抽签是正确的随机方法吗？按生日，或就诊顺序，或床号等方法呢？第一百零七页，共128页。随机方法RandomisationProcedure正确Adequate不清楚Unclear不正确Inadequate如何评价纳入研究质量第一百零八页，共128页。分配方案隐藏Allocationconcealment隐藏的方法不透光的密封信封中心控制，电话通知计算机加密上锁如何评价纳入研究质量第一百零九页，共128页。AllocationConcealment方法正确Adequate不清楚Unclear方法不正确Inadequate未实施NotUsed如何评价纳入研究质量第一百一十页，共128页。评估损耗偏倚LossOfFollow-up/withdraw/dropOut人数越多，偏倚的可能性越大用IntentionToTreat（ITT）分析避免损耗偏倚用IntentionToTreat分析估计损耗偏倚如何评价纳入研究质量第一百一十一页，共128页。盲法施盲对象研究实施者观察对象结果测量者资料分析者如何评价纳入研究质量第一百一十二页，共128页。基线可比性总体基线可比性：性别比例年龄大小病情轻重病程长短各测量指标的基线可比性依从性分析如何评价纳入研究质量第一百一十三页，共128页。JadadScale描述随机方法并正确：Y/N双盲并正确：Y/N没有失访或退出：Y/NY=1，N=05分为高质量研究3-4分为较高质量研究1-2分为低质量研究适用条件：各质量指标均十分清楚如何评价纳入研究质量第一百一十四页，共128页。质量评价注意事项两个以上评价人独立评价；专业人员和方法学家；不同意见讨论解决，如仍有分歧，咨询第三位评价人；仍不能解决，咨询COCHRANE专业组第一百一十五页，共128页。如果原始研究提供的信息不清楚，应向作者询问最好的方法：电话质量评价注意事项第一百一十六页，共128页。

纳