相关分析 级适用

第七章SPSS相关分析本章内容7.1相关分析概述7.2相关分析7.3偏相关分析7.1相关分析概述客观事物之间的关系大致可归纳为两大类，即函数关系：指两事物之间的一种一一对应的关系，如商品的销售额和销售量之间的关系。相关关系〔统计关系〕：指两事物之间的一种非一一对应的关系，例如家庭收入和支出、子女身高和父母身高之间的关系等。相关分析是分析客观事物之间相关关系的数量分析方法。相关关系的分类按相关的方向：正相关与负相关按相关的程度：完全相关、不相关、不完全相关按相关的形式：线性相关、非线性相关按涉及变量的多少：单相关、复相关、偏相关单相关：两个变量之间的相关。复相关：一个变量对两个或两个以上其他变量的相关关系。偏相关：在某一现象与多种现象相关的场合，假定其他变量不变，专门考察其中两个变量的相关关系称为偏相关。相关分析的内容判断社会经济现象之间是否存在相关关系，是直线相关，还是曲线相关；确定相关关系的密切程度。7.2.2相关系数利用相关系数进行变量间线性关系的分析通常需要完成以下两个步骤：第一，计算样本相关系数r；注意：〔1〕对不同类型的变量应采用不同的相关系数度量Pearson简单相关系数：度量两个数值型变量之间的线性相关程度Spearman等级相关系数：度量两个顺序类变量之间的线性相关程度Kendall相关系数：度量两个分类变量之间的线性相关程度Pearson简单相关系数〔2〕不同相关系数的范围和含义是相同的相关系数r的取值在-1～+1之间r>0表示两变量存在正的线性相关关系；r<0表示两变量存在负的线性相关关系|r|>0.8表示两变量有较强的线性关系；|r|<0.3表示两变量之间的线性关系较弱r＝1表示两变量存在完全正相关；r＝-1表示两变量存在完全负相关；r＝0表示两变量不相关〔3〕相关系数仅仅度量的是变量之间的线性相关关系，无法反映非线性相关关系。第二，对样本来自的两总体是否存在显著的线性关系进行推断。首先，提出原假设和备择假设。假设样本相关系数r是抽自具有不相关的总体，即其次，计算检验统计量和其概率P值。Pearson简单相关系数的检验统计量为：最后，作出决策。绘制散点图的操作方法1、组织数据：每个变量设置为相应的SPSS变量。2、操作步骤：简单散点图表示一对变量间相关关系的散点图重叠散点图表示多对变量间相关关系的散点图矩阵散点图◆以方形矩阵的形式分别显示多对变量间统计关系的散点图◆需弄清各矩阵单元中的横纵变量。●括号中，前一个变量为纵轴变量，后一个变量为横轴变量；对角线格子，显示参与绘图的变量。●X3在第三行第三列，那么第三行的所有图形都以X3为纵轴，第三列的所有图形都以X3为横轴。3-D散点图以立体图的形式表示三个变量间相关关系的散点图单点散点图一个变量分布的散点图7.2.4绘制散点图应用举例利用学生身高与体重.sav数据文件，绘制学生身高与体重的简单散点图利用人的体重与血压数据，绘制体重与血压的简单散点图利用学生身高与体重.sav数据文件，分别绘制男女生身高与体重的简单散点图利用城乡居民收入与消费数据文件，绘制城镇居民人均可支配收入与人均消费支出、农村居民人均纯收入与人均消费支出的重叠散点图利用住房状况数据文件，绘制方案购房面积、常住人口、现有住房面积的矩阵散点图和3-D散点图

7.2.5计算相关系数的操作方法〔1〕选择菜单Analyze－Correlate－Bivariate，出现窗口：〔2〕把参加计算相关系数的变量选到Variables框。〔3〕在CorrelationCoefficents框中选择计算哪种相关系数。〔4〕在TestofSignificance框中选择输出相关系数检验的双边〔Two-Tailed〕概率p值或单边〔One-Tailed〕概率p值。〔5〕选中Flagsignificancecorrelation选项表示分析结果中除显示统计检验的概率p值外，还输出星号标记，以标明变量间的相关性是否显著；不选中那么不输出星号标记。〔6〕在Option按钮中的Statistics选项中，选中Cross-productdeviationsandcovariances表示输出两变量的离差平方和协方差。7.2.6计算相关系数的应用举例利用学生数学成绩与统计学成绩数据文件，计算数学成绩与统计学成绩之间的相关系数并进行检验。利用学生身高与体重.sav数据文件，计算学生身高与体重的相关系数并进行检验利用学生身高与体重.sav数据文件，分别计算男女学生身高与体重的相关系数并进行检验利用居民储蓄数据文件，分别计算城镇储户、农村储户一次存〔取〕款金额与收入水平的相关系数并进行检验利用城乡居民收入与消费数据文件，分别计算城乡居民收入与消费支出之间的相关系数。7.3偏相关分析7.3.1偏相关分析和偏相关系数上节中的相关系数是研究两变量间线性相关性的，假设还存在其他因素影响，就相关系数本身来讲，它未必是两变量间线性相关强弱的真实表达，往往有夸大的趋势。例如，人的身高和肺活量都与体重存在线性关系，在体重的影响作用下，对身高和肺活量进行相关分析，会发现两者存在较强的相关关系，但是实际上如果控制体重，保持体重不变，考察同样体重的人的身高和肺活量的关系，此时身高与肺活量就不存在相关关系。类似地，受到智力因素的影响作用，学生的语文成绩和数学成绩的变化存在一致性，两者有相关关系，但是这种相关实际上是一种伪相关。偏相关分析也称净相关分析，它在控制其他变量的线性影响的条件下分析两变量间的线性关系，所采用的工具是偏相关系数。控制变量个数为1时，偏相关系数称一阶偏相关；当控制两个变量时，偏相关系数称为二阶偏相关；当控制变量的个数为0时，偏相关系数称为零阶偏相关，也就是简单相关系数。利用偏相关系数进行分析的步骤第一，计算样本的偏相关系数假设有三个变量y、x1和x2，在分析x1和y之间的净相关时，当控制了x2的线性作用后，x1和y之间的一阶偏相关定义为：

偏相关系数的取值范围及大小含义与相关系数相同。第二，对样本来自的两总体是否存在显著的净相关进行推断检验统计量为：其中，r为偏相关系数，n为样本数，q为阶数。t统计量服从n-q-2个自由度的t分布。7.3.2偏相关分析的根本操作1.选择菜单Analyze－Correlate－Partial2.把参与分析的变量选择到Variables框中。3.选择一个或多个控制变量到Controllingfor框中。4.在TestofSignificance框中选择输出偏相关检验的双尾概率p值或单尾概率p值。5.在Option按钮中的Statistics选项中，选中Zero-orderCorrelations表示输出零阶偏相关系数。至此，SPSS将自动进行偏相关分析和统计检验，并将结果显示到输出窗口。7.3.3偏相关分析的应用举例

1、某地29名13岁男童身高〔cm〕、体重〔kg〕和肺活量〔ml〕的数据如下表，试对该资料作控制体重影响作用的身高与肺活量的相关分析。

29名学生的身高、体重、肺活量2、某学校随机抽取18名学生，测定其智商〔IQ〕值，连同当年数学和语文两科总成绩如下表，试在控制智商的影响作用下分析数学成绩与语文成绩的相关性？9.4线性回归分析线性回归分析概述线性回归分析的内容能否找到一个线性组合来说明一组自变量和因变量的关系如果能的话，这种关系的强度有多大，也就是利用自变量的线性组合来预测因变量的能力有多强整体解释能力是否具有统计上的显著性意义在整体解释能力显著的情况下，哪些自变量有显著意义回归分析的一般步骤确定回归方程中的解释变量〔自变量〕和被解释变量〔因变量〕确定回归方程对回归方程进行各种检验利用回归方程进行预测9.4.2线性回归模型一元线性回归模型的数学模型：其中x为自变量；y为因变量；为截距，即常量；为回归系数，说明自变量对因变量的影响程度。多元线性回归方程：y=β0+β1x1+β2x2+...+βkxk+εβ1、β2、βk为偏回归系数。βI表示在其他自变量保持不变的情况下，自变量x1变动一个单位所引起的因变量y的平均变动。

9.4.3线性回归方程的统计检验回归方程的拟合优度回归直线与各观测点的接近程度称为回归方程的拟合优度，也就是样本观测值聚集在回归线周围的紧密程度。1、离差平方和的分解：建立直线回归方程可知：y的观测值的总变动可由来反映，称为总变差。引起总变差的原因有两个：由于x的取值不同，使得与x有线性关系的y值不同；随机因素的影响。xy总离差平方和可分解为即：总离差平方和〔SST)=剩余离差平方和(SSE)+回归离差平方和〔SSR)其中；SSR是由x和y的直线回归关系引起的，可以由回归直线做出解释；SSE是除了x对y的线性影响之外的随机因素所引起的Y的变动，是回归直线所不能解释的。2、可决系数〔判定系数、决定系数〕

回归平方和在总离差平方和中所占的比例可以作为一个统计指标，用来衡量X与Y的关系密切程度以及回归直线的代表性好坏，称为可决系数。对于一元线性回归方程：对于多元线性回归方程：在多元线性回归分析中，引起判定系数增加的原因有两个：一个是方程中的解释变量个数增多，另一个是方程中引入了对被解释变量有重要影响的解释变量。如果某个自变量引入方程后对因变量的线性解释有重要奉献，那么必然会使误差平方和显著减小，并使平均的误差平方和也显著减小，从而使调整的判定系数提高。所以在多元线性回归分析中，调整的判定系数比判定系数更能准确的反映回归方程的拟合优度。9.4.3.2回归方程的显著性检验〔方差分析F检验〕回归方程的显著性检验是要检验被解释变量与所有的解释变量之间的线性关系是否显著。对于一元线性回归方程，检验统计量为：对于多元线性回归方程，检验统计量为：9.4.3.3回归系数的显著性检验〔t检验〕回归系数的显著性检验是要检验回归方程中被解释变量与每一个解释变量之间的线性关系是否显著。对于一元线性回归方程，检验统计量为：

对于多元线性回归方程，检验统计量为：9.4.3.4残差分析

残差是指由回归方程计算得到的预测值与实际样本值之间的差距，定义为：

对于线性回归分析来讲，如果方程能够较好的反映被解释变量的特征和规律性，那么残差序列中应不包含明显的规律性。残差分析包括以下内容：残差服从正态分布，其平均值等于0；残差取值与X的取值无关；残差不存在自相关；残差方差相等。

1、对于残差均值和方差齐性检验可以利用残差图进行分析。如果残差均值为零，残差图的点应该在纵坐标为0的中心的带状区域中随机散落。如果残差的方差随着解释变量值〔或被解释变量值〕的增加呈有规律的变化趋势，那么出现了异方差现象。2、DW检验。DW检验用来检验残差的自相关。检验统计量为：DW=2表示无自相关，在0-2之间说明存在正自相关，在2-4之间说明存在负的自相关。一般情况下，DW值在1.5-2.5之间即可说明无自相关现象。9.4.3.5多重共线性分析

多重共线性是指解释变量之间存在线性相关关系的现象。测度多重共线性一般有以下方式：1、容忍度：其中，是第i个解释变量与方程中其他解释变量间的复相关系数的平方，表示解释变量之间的线性相关程度。容忍度的取值范围在0-1之间，越接近0表示多重共线性越强，越接近1表示多重共线性越弱。2、方差膨胀因子VIF。方差膨胀因子是容忍度的倒数。VIF越大多重共线性越强，当VIF大于等于10时，说明存在严重的多重共线性。

3、特征根和方差比。根据解释变量的相关系数矩阵求得的特征根中，如果最大的特征根远远大于其他特征根，那么说明这些解释变量间具有相当多的重复信息。如果某个特征根既能够刻画某解释变量方差的较大局部比例〔0.7以上〕，又能刻画另一解释变量方差的较大局部比例，那么说明这两个解释变量间存在较强的线性相关关系。4、条件指数。指最大特征根与第i个特征根比的平方根。通常，当条件指数在0-10之间时说明多重共线性较弱；当条件指数在10-100之间说明多重共线性较强；当条件指数大于100时说明存在严重的多重共线性。

9.4.4线性回归分析的根本操作〔1〕选择菜单Analyze－Regression－Linear，出现窗口：〔2〕选择被解释变量进入Dependent框。〔3〕选择一个或多个解释变量进入Independent(s)框。〔4〕在Method框中选择回归分析中解释变量的筛选策略。其中Enter表示所选变量强行进入回归方程，是SPSS默认的策略，通常用在一元线性回归分析中；Remove表示从回归方程中剔除所选变量；Stepwise表示逐步筛选策略；Backward表示向后筛选策略；Forward表示向前筛选策略。注：多元回归分析中，变量的筛选一般有向前筛选、向后筛选、逐步筛选三种根本策略。向前筛选〔Forward〕策略：解释变量不断进入回归方程的过程。首先，选择与被解释变量具有最高线性相关系数的变量进入方程，并进行回归方程的各种检验；然后，在剩余的变量中寻找与被解释变量偏相关系数最高且通过检验的变量进入回归方程，并对新建立的回归方程进行各种检验；这个过程一直重复，直到再也没有可进入方程的变量为止。向后筛选〔Backward〕策略：变量不断剔除出回归方程的过程。首先，所有变量全部引入回归方程，并对回归方程进行各种检验；然后，在回归系数显著性检验不显著的一个或多个变量中，剔除t检验值最小的变量，并重新建立回归方程和进行各种检验；如果新建回归方程中所有变量的回归系数检验都显著，那么回归方程建立结束。否那么按上述方法再一次剔除最不显著的变量，直到再也没有可剔除的变量为止。逐步筛选〔Stepwise〕策略：在向前筛选策略的根底上结合向后筛选策略，在每个变量进入方程后再次判断是否存在应该剔除出方程的变量。因此，逐步筛选策略在引入变量的每一个阶段都提供了再剔除不显著变量的时机。〔5〕第三和第四步中确定的解释变量及变量筛选策略可放置在不同的块〔Block〕中。通常在回归分析中不止一组待进入方程的解释变量和相应的筛选策略，可以单击Next和Previous按钮设置多组解释变量和变量筛选策略并放置在不同的块中。〔6〕选择一个变量作为条件变量放到SelectionVariable框中，并单击Rule按钮给定一个判断条件。只有变量值满足判定条件的样本才参与线性回归分析。〔7〕在CaseLabels框中指定哪个变量作为样本数据点的标志变量，该变量的值将标在回归分析的输出图形中。9.4.5线性回归分析的其他操作1、Statistics按钮，出现的窗口可供用户选择更多的输出统计量。〔1〕Estimates：SPSS默认输出项，输出与回归系数相关的统计量。包括回归系数〔偏回归系数〕、回归系数标准误差、标准化回归系数、回归系数显著性检验的t统计量和概率p值，各解释变量的容忍度。〔2〕ConfidenceIntervals：输出每个非标准化回归系数95％的置信区间。〔3〕Descriptive：输出各解释变量和被解释变量的均值、标准差、相关系数矩阵及单侧检验概率p值。〔4〕Modelfit：SPSS默认输出项，输出判定系数、调整的判定系数、回归方程的标准误差、回归方程显著F检验的方程分析表。〔5〕Rsquaredchange：输出每个解释变量进入方程后引起的判定系数的变化量和F值的变化量。〔6〕Partandpartialcorrelation：输出方程中各解释变量与被解释变量之间的简单相关、偏相关系数。〔7〕Covariancematrix：输出方程中各解释变量间的相关系数、协方差以及各回归系数的方差。〔8〕CollinearityDiagnostics：多重共线性分析，输出各个解释变量的容忍度、方差膨胀因子、特征值、条件指标、方差比例等。〔9〕在Residual框中：Durbin-waston表示输出DW检验值；CasewiseDiagnostic表示输出标准化残差绝对值大于等于3〔SPSS默认值〕的样本数据的相关信息，包括预测值、残差、杠杆值等。2、Options选项，出现的窗口可供用户设置多元线性回归分析中解释变量筛选的标准以及缺失值的处理方式。3、Plot选项，出现的窗口用于对残差序列的分析。〔1〕窗口左边框中各变量名的含义是：DEPENDNT表示被解释变量，*ZPRED表示标准化预测值，*ZRESID表示标准化残差，*DRESID表示剔除残差，*ADJPRED表示调整的预测值，*SRESID表示学生化残差，*SDRESID表示剔除学生化残差。〔2〕绘制多对变量的散点图，可根据需要在scatter框中定义散点图的纵坐标和横坐标变量。〔3〕在StandardizedResidualPlots框中选择Histogram选项绘制标准化残差序列的直方图；选择Normalprobabilityplot绘制标准化残差序列的正态分布累计概率图。选择Produceallpartialplots选项表示依次绘制被解释变量和各个解释变量的散点图。4、Save选项，该窗口将回归分析的某些结果以SPSS变量的形式保存到数据编辑窗口中，并可同时生成XML格式的文件，便于分析结果的网络发布。〔1〕PredictedValues框中：保存非标准化预测值、标准化预测值、调整的预测值和预测值的均值标准误差。〔2〕Distance框中：保存均值或个体预测值95％〔默认〕置信区间的下限值和上限值。〔3〕Residual框中：保存非标准化残差、标准化残差等。〔4〕InfluenceStatistics框中：保存剔除第i个样本后统计量的变化量。5、WSL选项，采用加权最小二乘法替代普通最小二乘法估计回归参数，并指定一个变量作为权重变量。为研究高等院校人文社会科学研究中立项课题数受哪些因素的影响，收集1999年31个省市自治区局部高校有关社科研究方面的数据，并利用线性回归分析方法进行分析。这里，以课题总数为被解释变量，解释变量为投入人年数〔X2〕、受投入高级职称的人年数〔X3〕、投入科研事业费〔X4〕、专著数〔X6〕、论文数〔X7〕、获奖数〔X8〕。〔1〕解释变量采用强制进入策略〔Enter〕，并做多重共线性检测。〔2〕解释变量采用向后筛选策略让SPSS自动完成解释变量的选择。

9.4.6应用举例9.5曲线估计9.5.1曲线估计概述变量间的相关关系中，并不总是表现出线性关系，非线性关系也是极为常见的。变量之间的非线性关系可以划分为本质线性关系和本质非线性关系。本质线性关系是指变量关系形式上虽然呈非线性关系，但可通过变量变换为线性关系，并最终可通过线性回归分析建立线性模型。本质非线性关系是指变量关系不仅形式上呈非线性关系，而且也无法变换为线性关系。本节的曲线估计是解决本质线性关系问题的。常见的本质线性模型有：1、二次曲线〔Quadratic〕，方程为，变量变换后的方程为2、复合曲线〔Compound〕，方程为，变量变换后的方程为3、增长曲线〔Growth〕，方程为，变量变换后的方程为4、对数曲线〔Logarithmic〕，方程为，变量变换后的线性方程为5、三次曲线〔Cubic〕，方程为，变量变换后的方程为6、S曲线〔S〕，方程为，变量变换后的方程为7、指数曲线〔Exponential〕，方程为，变量变换后的线性方程为8、逆函数〔Inverse〕，方程为变量变换后的方程为9、幂函数〔Power〕，方程为变量变换后的方程为10、逻辑函数〔Logistic〕，方程为变量变换后的线性方程为SPSS曲线估计中，首先，在不能明确究竟哪种模型更接近样本数据时，可在多种可选择的模型中选择几种模型；然后SPSS自动完成模型的参数估计，并输出回归方程显著性检验的F值和概率p值、判定系数R2等统计量；最后，以判定系数为主要依据选择其中的最优模型，并进行预测分析等。另外，SPSS曲线估计还可以以时间为解释变量实现时间序列的简单回归分析和趋势外推分析。9.5.2曲线估计的根本操作可通过绘制并观察样本数据的散点图粗略确定被解释变量和解释变量之间的相关关系，为曲线拟合中的模型选择提供依据。SPSS曲线估计的根本操作步骤是：〔1〕选择菜单Analyze－Regression－CurveEstimation，出现窗口如下页所示