《双变量回归与相关》PPT课件.ppt

102,1,第九章,双变量回归与相关LinearRegressionandCorrelation,预防医学教研室邹莉玲,102,2,问题引出对两个变量之间关系的研究,例如糖尿病病人的血糖与胰岛素水平的关系如何?分析资料涉及每个病人的两个变量值(血糖、胰岛素水平），称为双变量资料(Bivariatedata），记作：（X1,Y1）,（X2,Y2）,（Xn,Yn）分析目的：研究X和Y之间的数量关系分析方法：回归与相关分析，最简单的是直线回归和直线相关。,102,3,十九世纪英国人类学家F.Galton首次在自然遗传一书中，提出并阐明了“相关”和“相关系数”两个概念，为相关论奠定了基础。其后，他和英国统计学家KarlPearson对上千个家庭做了调查发现：儿子身高（Y，英寸）与父亲身高（X，英寸）存在线性关系：。Galton将这种子代身高趋向于种族稳定的现象称之“回归”。,历史背景：,102,4,目前，“回归”已成为表示变量之间某种数量依存关系的统计学术语，并且衍生出“回归方程”“回归系数”等统计学概念。如研究糖尿病人血糖与其胰岛素水平的关系，研究儿童年龄与体重的关系等。,102,5,第一节直线回归Linearregression,102,6,一、直线回归的概念,目的：如果以某个变量X作为自变量，研究另一个变量Y（应变量）对自变量X的数量依存关系，就是直线回归。特点：直线回归关系是统计关系，不同于一般数学上的X和Y的函数关系。,102,7,例9-1某地方病研究所调查了8名正常儿童的尿肌酐含量（mmol/24h）如表9-1。估计尿肌酐含量（Y）对其年龄（X）的回归方程。,102,8,表9-18名正常儿童的年龄（岁）与尿肌酐含量（mmol/24h）,102,9,102,10,在定量描述儿童年龄与其尿肌酐含量数量上的依存关系时，将年龄称为自变量(independentvariable)，用X表示；尿肌酐含量称为应变量(dependentvariable)，用Y表示。,102,11,由图9-1可见，尿肌酐含量Y随年龄X增加而增大且呈直线趋势，但并非8个散点恰好都在一条直线上，这与两变量间严格的直线函数关系不同，称为直线回归（linearregression）,其方程叫直线回归方程，以区别严格意义的直线方程。双变量直线回归是回归分析中最基本、最简单的一种，故又称简单回归（simpleregression)。,102,12,直线回归方程的一般表达式为,为各X处Y的总体均数的估计。,102,13,1a为回归直线在Y轴上的截距。,a0，表示直线与纵轴的交点在原点的上方；a0，直线从左下方走向右上方，Y随X增大而增大；b0,b0,b=0,102,15,102,16,102,17,二、直线回归方程的求法,残差(residual)或剩余值，即实测值Y与假定回归线上的估计值的纵向距离。求解a、b实际上就是“合理地”找到一条能最好地代表数据点分布趋势的直线。,最小二乘法(leastsumofsquares)原则：即保证各实测点至直线的纵向距离的平方和最小。,（X，Y）,102,18,102,19,102,20,例9-1某地方病研究所调查了8名正常儿童的尿肌酐含量（mmol/24h）如表9-1。估计尿肌酐含量（Y）对其年龄（X）的回归方程。,102,21,表9-18名正常儿童的年龄（岁）与尿肌酐含量（mmol/24h）,102,22,解题步骤,102,23,102,24,102,25,此直线必然通过点(,)且与纵坐标轴相交于截距a。如果散点图没有过坐标系原点，可在自变量实测范围内远端取易于读数的X值代入回归方程得到一个点的坐标，连接此点与点(,)也可绘出回归直线。,102,26,102,27,三、直线回归中的统计推断,102,28,（一）回归方程的假设检验,建立样本直线回归方程，只是完成了统计分析中两变量关系的统计描述，研究者还须回答它所来自的总体的直线回归关系是否确实存在，即是否对总体有？,102,29,102,30,102,31,1方差分析,102,32,（X，Y）,102,33,数理统计可证明：,102,34,上式用符号表示为,式中,102,35,102,36,上述三个平方和，各有其相应的自由度，并有如下的关系：,102,37,如果两变量间总体回归关系确实存在，回归的贡献就要大于随机误差，大到何种程度时可以认为具有统计意义，可计算统计量F,102,38,式中,102,39,2.t检验,102,40,例9-2检验例9-1数据得到的直线回归方程是否成立？,102,41,（1）方差分析,102,42,表9-2方差分析表,列出方差分析表如表9-2。,102,43,（2）t检验,102,44,注意：,102,45,（二）总体回归系数的可信区间,利用上述对回归系数的t检验，可以得到的1双侧可信区间为,102,46,例9-3根据例9-1中所得b=0.1392，估计其总体回归系数的双侧95%可信区间。,102,47,（0.1392-2.4470.0304，0.1392+2.4470.0304）=（0.0648，0.2136）,102,48,（三）利用回归方程进行估计和预测,102,49,（9-15）,（9-14）,反映其抽样误差大小的标准误为,102,50,（9-16）,（9-17）,102,51,两条实曲线总体均数的可信区间；两条虚曲线个体Y值的预测区间，范围更宽。二者都是中间窄，两头宽；都在X=处最窄。,102,52,例9-4用例9-1所得直线回归方程，计算当X0=12时，的95%可信区间和相应个体值的95%预测区间。,102,53,计算步骤,例9-1、例9-2已计算出,102,54,102,55,第二节直线相关,102,56,直线相关(linearcorrelation)又称简单相关(simplecorrelation)，用于双变量正态分布(bivariatenormaldistribution)资料。其性质可由图9-6散点图直观的说明。目的：研究两个变量X,Y数量上的依存（或相关）关系。特点：统计关系,一、直线相关的概念,102,57,二、相关系数的意义与计算,1.意义：相关系数（correlationcoefficient）又称Pearson积差相关系数，用来说明具有直线关系的两变量间相关的密切程度与相关方向。,相关系数没有单位，其值为-1r1。r值为正表示正相关，r值为负表示负相关，r的绝对值等于1为完全相关，r=0为零相关。,102,58,102,59,2.计算：样本相关系数的计算公式为,（9-18）,102,60,由例9-1算得，,按公式（9-18）,例9-5对例9-1数据（见表9-1），计算8名儿童的尿肌酐含量与其年龄的相关系数。,102,61,三、相关系数的统计推断,（一）相关系数的假设检验,（9-19）,102,62,例9-6对例9-5所得r值，检验尿肌酐含量与年龄是否有直线相关关系？,102,63,检验步骤,本例n=8，r=0.8818，按公式（9-19）,102,64,（二）总体相关系数的可信区间,102,65,具体步骤如下,102,66,例9-7对例9-5所得r值，估计总体相关系数的95%可信区间。,再按公式（9-22）将z作反变换，得到年龄与尿肌酐含量的总体相关系数95%可信区间为（0.4678,0.9971）。,102,67,四、决定系数(coefficientofdetermination),定义为回归平方和与总平方和之比，计算公式为：,（9-23）,取值在0到1之间且无单位，其数值大小反映了回归贡献的相对程度，也就是在Y的总变异中回归关系所能解释的百分比。,102,68,102,69,五、直线回归与相关应用的注意事项,102,70,1根据分析目的选择变量及统计方法,直线相关用于说明两变量之间直线关系的方向和密切程度，X与Y没有主次之分；直线回归则进一步地用于定量刻画应变量Y对自变量X在数值上的依存关系，其中应变量的定夺主要依专业要求而定，可以考虑把易于精确测量的变量作为X，另一个随机变量作Y，例如用身高估计体表面积。两个变量的选择一定要结合专业背景，不能把毫无关联的两种现象勉强作回归或相关分析。,102,71,102,72,2进行相关、回归分析前应绘制散点图第一步,（1）散点图可考察两变量是否有直线趋势；（2）可发现离群点（outlier）。,散点图对离群点的识别与处理需要从专业知识和现有数据两方面来考虑，结果可能是现有回归模型的假设错误需要改变模型形式，也可能是抽样误差造成的一次偶然结果甚至过失误差。需要认真核对原始数据并检查其产生过程认定是过失误差，或者通过重复测定确定是抽样误差造成的偶然结果，才可以谨慎地剔除或采用其它估计方法。,102,73,3资料的要求,直线相关分析要求X与Y服从双变量正态分布；直线回归要求至少对于每个X相应的Y要服从正态分布，X可以是服从正态分布的随机变量也可以是能精确测量和严格控制的非随机变量；*对于双变量正态分布资料，根据研究目的可选择由X估计Y或者由Y估计X，一般情况下两个回归方程不相同