心理学研究方法元分析.ppt

1,一、相关概念,1、显著性(significance) 2、效应量(effect size) 3、原因量(cause size),2,1、显著性(significance)： 反映结果或结论的可靠性。 I型错误与II型错误 统计功效 边缘显著（marginally significant）,3,2、效应量(effect size)： 反映实验处理效应或变量间相关程度的大小。 均值差异的效应量： 以控制组的标准差或联合标准差为单位表示实验组和控制组之间的差异。,4,效应量大小与实际意义,5,效应量大小与实际意义,6,显著性 = 效应量研究规模,7,3、原因量(cause size)： 反映研究中实施自变量的力度或难易程度。 服药一天 vs. 服药一年 教改实验一月 vs. 教改实验三年,8,小的效应量也可能具有重要意义： 1. 自变量的操纵代价极小 一块饼干与助人行为 2. 因变量的改变极为困难 Milgram（1963）的服从实验,9,二、元分析的含义,primary analysis: 第一手分析，对单项研究中得到的数据进行分析以验证假设。 Secondary analysis: 第二手分析，对研究进行再分析(re-analysis)以验证新的假设或者运用更适合的分析方法。,10,Glass（1976）：以综合已有的发现为目的，对单个研究结果进行综合的统计学分析方法。 Ellenberg(1988)：对具有共同研究目的相互独立的多个研究结果给予定量分析、合并分析，剖析研究间差异特征，综合评价研究结果。 Sacks（1987）：对以往的研究结果进行统计学的合并和严谨的系统综述方法。,11,元分析就是应用特定的设计和统计学方法对以往的研究结果进行整体的和系统的定性与定量分析。它是回顾性的，是对传统综述的一种改进，是概括以往研究结果的一种方法，包括大量的方法和技术，具有全面、系统和定量的特点，可以用以对以前的具有不同研究设计的和不同时期收集到的资料进行整合。,12,一般研究以单个被试为最小的分析单位；元分析以单个研究为分析单位。 从研究中能够获取何种分析数据？,13,在用样本信息推断总体参数时，是存在抽样误差的，并且抽样误差的大小与样本量的大小有关。 统计学用抽样分布的理论来描述样本统计量的变化规律。,元分析所依据的统计学思想,14,从一个均数为1.5，标准差为0.7的正态总体中进行随机抽样，样本量分别为20，50，100，200，300，500，1000，不同的样本量均进行20次抽样，共得到140个样本。 分别计算每个样本的均数，标准差和标准误。 以样本的均数为横坐标，以样本量为纵坐标作散点图,15,从均数为1.5，标准差为0.7的正态总体的140次随机抽样结果,16,由于抽样过程存在抽样误差，样本量较大时抽样误差较小。 所以从图中可以看出所有的点以样本量较大时的均数为轴，左右是基本对称的。 用方差分析的方法对不同的样本所对应的总体均数是否相等进行检验，方差分析的结果为F=0.862,P=0.878。 说明140个样本对应的总体均数是相同的。 用这140个样本的信息来估计总体的均数和标准差，=1.501,=0.699。这样做的结果是提高了估计的精度。,17,理想状态 我们可以把不同作者对相同问题进行的研究看作是从同一总体中进行抽样得到的一个随机样本，如果他们都是按照相同的设计得到的研究结果，并且我们可以找到每一项研究的结果，这样就可以根据上面的原理得到一个更为可靠的结果。,18,实际情况 不同作者所使用的设计方案会有一定的差别；选择的实验对象有所不同；研究结果不一定都能发表到专业杂志上。 因此实际能够得到的资料可能是不完整的，甚至是有偏性的，如阳性结果的文章、和目前普遍能够接受的观点一致的文章可能更容易发表在专业杂志上。 重复发表。 人为地修改数据。,19,三、元分析的目的和意义,传统文献综述存在的一些问题： 以定性分析或描述为主，难以给出一个定量的结论。当所涉及的实验数量不断增加时，得出错误结论的机率也随之增加。 如果有关研究的数量众多如有500个，那么要从这么多的研究结果中得出一个一般性的结论已超出了个人的能力。,20,综述者究竟使用了哪些文献常常不得而知。 传统综述中没有足够重视研究质量、样本大小等因素对研究结论带来的影响。 使用同样的文献，不同的综述者可以得出不同的结论。,21,元分析具有以下作用： 解决研究结果的矛盾，定量估计研究效应的平均水平，为进一步的研究和做出决策提供全面的文献总结。 提高统计分析的功效。 揭示和分析多个同类研究的分歧。,22,为确定新的研究问题和对新实验的设计提供帮助。 具有处理大量文献的能力，不受研究数目的限制。 节省研究费用。 研究发表偏向(publication bias)等问题。,23,四、元分析的基本过程,一、提出问题，制定计划 有意义 一般来自于当前存在争论的研究问题 目前或近期有没有发表的系统性综述 目前有没有一定数量的可供使用的原始文献,24,二、检索相关文献 确定检索主题词 确定检索数据库 确定检索年限 非发表文献的搜集方法 会议 网站 同行了解 准备与作者联系的相关文件,25,三、对文献进行编码，并根据纳入标准，选出符合要求的纳入文献 确定纳入标准和排除标准 根据纳入标准和排除标准筛选收集的原始文献 确定原始文献质量的评价标准 两个人分别完成筛选和质量评价,26,四、纳入研究的质量评价 内部效度： 其研究方法是否合理， 统计分析是否正确， 结论是否可靠， 研究结果是否支持作者的结论等。,27,五、正确进行数据提取 六、资料的统计学处理 七、结果的敏感性分析 八、元分析结果的分析和讨论 九、根据统计结果作出正确、全面的结论,28,元分析资料的统计学处理,1. 明确资料类型，选择恰当的效应指标,d = ( )/S,S =,29,2检验纳入研究的异质性,Q =,=,30,3根据异质性检验结果选择统计模型，进行统计分析，得到效应合并值的点估计和区间估计值。,=,31,如何判断效应合并值的大小： Cohen（1977)提出了一个对效应量大小的经验解释，即0.2是“小”效应，0.5是“中”效应，0.8是“大”效应。,32,4合并假设检验统计量 Fisher法分为两步：如果文献中没有给出确切的P值的话，将各检验统计量如t值、 X2值转为P值。将P值转为X2值。,X2 = -2lnPi df=2k,33,5根据情况进行亚组分析 亚组分析（subgroup analysis）就是根据不同的研究特征如被试的年龄、职业，将各独立研究分为不同组，然后再分别进行合并分析，比较各组及其与总的合并效应间有无显著性差异。,34,五、元分析的局限性,（一）各种偏向