应用统计学-绪论2015课件

1、马昕经济学教研室电话mail: maxin应用统计学教学目的：信息时代是数据时代。决策已从过去以经验为主转变到科学决策。如何从大量数据中发现尽可能多的有用信息，从而把握事物特征，为科学决策提供依据，这是本课程要解决的问题。本课程是在学生掌握统计分析的基本知识和技能之后，以进一步深化学生的量化分析能力为宗旨、以多元统计为中心的一门应用性课程。课程内容：第一章 绪论第二章 向量、矩阵与多维正态分布第三章 方差分析第四章 回归分析第五章 聚类分析第六章 判别分析第七章 主成分分析第八章 因子分析第九章 对应分析第十章 结构方程模型教材：Jams M Lattin等著，多元数

2、据分析(英文版)，机械工业出版社参考书何晓群多元统计分析（第三版），中国人民大学出版社,2012王学民应用多元分析，上海财经大学出版社理查德约翰逊实用多元统计分析，清华大学出版社，2008（英文版）考核方法：读书报告：30分（考试前交）期末考试（开卷） ：70分教学资源位于： (key：ncepuedu2013)：网盘课件课件例题数据一、多元数据分析的必要性数据分析从大量数据中发现尽可能多的有用信息，从而把握事物特征的过程事物特征的描述：变量/指标每个变量/指标数据：反映事物某一方面的特征一般来说事物通常具有多面性，即有多方面特征例：学生的能力、物种、国家经济实力、企业竞争力仅从一个方面往往不

3、足以反映事物特性或个体之间的差异必须全面考虑事物的各个方面，才能对其正确认识。统计学：单变量/双变量分析描述统计集中趋势离散趋势变量分布异常点推断统计：从样本统计量推断总体参数参数估计：样本均值估计总体均值，假设检验：总体均值或方差的检验，两总体均值/方差相等的检验双变量：相关分析：两个随机变量间的（线性）相关程度一元回归：一个随机变量对另一变量间的依存关系Simpsons ParadoxNo relationship between sex and acceptance for either programmeSo no evidence of discriminationWhy?More

4、females apply for the English programme, but it it hard to get intoMore males applied to Engineering, which has a higher acceptance rate than EnglishMust look deeper than single cross-tab to find this outEngineeringMaleFemaleAccept3010Refuse entry3010Total6020EnglishMaleFemaleAccept510Refuse entry15

5、30Total2040两变量分析有时会得到虚假结果Simpsons ParadoxIn this example, the bivariate analysis (cross-tabulation or correlation) gave misleading resultsIntroducing another variable gave a better understanding of the dataIt even reversed the initial conclusions性别录取率专业？Some Common Patterns in Point Clouds planes fi

6、laments clusters outliersData Analysis:Finding and Interpreting such Patterns具体方法聚类分析：按距离远近分类判别分析：给定样本定类亲疏判别主成分分析、因子分析、对应分析：找出主要因素，化简数据方差分析多元回归分析结构方程模型GroupingDiscriminating Principle Component, Factoring，CorrespondenceInferring推断exploring探索数据模式Structural Equation Model课程重点强调方法的应用而非理论推导强调方法的内涵与几何解释强

7、调SPSS软件的应用和结果的解释牢记：从数据中获取信息没有确定的方法具体问题具体分析：把握机理三、多元数据的描述数据的计量尺度(measurement scale)：告诉我们从数据中可获得哪些信息。品质数据：计算无意义定类尺度：按穷尽和互斥原则将对象某种特征归类通常用虚拟变量表示：定序尺度对象特征等级或顺序差别的测度三、多元数据的描述数值数据定距尺度：测度对象特征的间距，不能做绝对比较。定比尺度：即可测度间距，又可做绝对比较。数值数据的矩阵表示： 样本数n，变量数p数据的矩阵描述注：若无特别说明，向量均指列向量四、统计基本知识回顾：单变量分析描述统计参数估计假设检验异常点均值的代表性目的：描述

8、数据分布与正态分布的可能偏离正态分布具有许多有利于统计的特性一般独立随机事件的分布都服从正态分布人的身高，产品质量偏度：用来度量对称性的指标峰度：刻画一个分布陡峭或平缓程度的指标正态右偏左偏正态比正态更陡比正态平缓分布的偏度与峰度基本概念2、参数估计总体样本变量观测值华北电大的所有学生华北电大的所有学生中所有抽取的100名学生基本概念（续）参数统计量精确度准确度偏误标准差：小标准误：小标准差：大标准误：小标准误差standard error标准差standard deviation抽样推断：从样本统计量推断总体参数参数估计：在未知总体参数的情况下，利用样本统计量来估计总体参数的方法。参数点估计

9、参数区间估计假设检验：先对总体参数作一个假设，然后通过搜集样本数据，用样本统计量判断对总体参数的假设是否成立参数估计：总体参数的点估计假设在总体X中， 为未知参数（均值、方差、成数等）。由样本（x1、x2xn ）构造统计量 来估计未知参数，称 为的点估计量。 将某次抽样的样本观测值，代入即得该估计量的一个点估计值 。方法 矩估计法 极大似然估计法 最小二乘法设为待估计的总体参数， 为样本统计量，则的优良标准为：点估计量的优良性标准指样本统计量抽样分布的平均值等于被估计的总体指标无偏性设 和 是总体指标的两个无偏估计量，有效性若，则称为比 更有效的估计量如果随着样本容量n的增大，样本估计量在概率

10、意义下越来越接近于总体真实值，则称该估计量是待估参数的一致估计量。一致性一致性是对一个估计量的最起码要求。“如果你在n趋于无穷大时还不能正确地得到它，那你就不应该做这件事”葛兰杰n1n2n3n1n2n3置信度（1-）反映了估计的可靠程度。根据样本指标和抽样极限误差可以得到满足一定置信度的总体指标的可能范围定义设总体参数为，L、U为由样本确定的两个统计量，对于给定的（01)，有P(LU)=1-，则称（L, U）为参数的置信度为1-的置信区间参数估计：参数的区间估计可靠度精确度为什么要做区间估计？任意抽出一个妇女，试猜测其体重，猜对赢50元，猜错输50元如何猜？输赢概率如何？例：20个妇女的体重资

11、料如表, 平均体重：123.6pound,标准差：15.5猜均值上下一个标准差：赢的概率？输的概率猜均值上下两个标准差：输赢概率？目的前提条件 置信度的置信区间估计总体均值正态总体方差已知估计总体均值正态总体方差未知（小样本）估计总体均值 置信区间估计方法一览表总体分布知，正态总体方差未知（大样本）区间估计原理0.6827落在范围内的概率为68.27%样本抽样分布曲线原总体分布曲线置信度1-=0.6827区间估计原理0.9545落在范围内的概率为95.45%样本抽样分布曲线原总体分布曲线置信度1-=0.9545例 某保险公司从投保人中随机抽取36人，计算出此36人平均年龄为39.5岁，已知投保

12、人年龄近似正态分布，标准差7.2岁，试以99%的可靠度求所有投保人平均年龄的置信区间。如果将可靠度降低到95%的水平呢？解：求所有投保人平均年龄的置信区间。现有一个点估计量在点估计量基础上，构造投保人平均年龄的置信区间关键是置信区间的宽度是多少。置信区间宽度取决于置信度和抽样平均误差：根据置信度查表得到在99%的置信度下，投保人年龄总体均值的置信区间为： （39.5-3.1, 39.5+3.1）36.442.6置信度95%，Z/2=1.96, =1.96*1.2=2.35, 置信区间(37.2,41.9)3、假设检验采用逻辑上的反证法先认为假设为真，观察在此前提下所抽到样本的出现是否合理。若合

13、理则判断假设可接受，反之拒绝假设。判断是否合理的依据统计上的小概率原理（即这里的反证法是基于一定概率的反证法）。 假设检验的步骤提出原假设和备择假设:收集样本数据，确定适当的检验统计量及其分布规定显著性水平，确定拒绝域和接受域计算检验统计量的值作出统计决策假设的三种形式：Z临界点Z/2接受域-Z/2ZZ/2Z临界点-Z拒绝域Z -ZZ临界点Z拒绝域ZZ接受域Z Z在原假设为真的前提下，出现观察到的样本以及更极端样本的概率。P值（P-value）:拒绝原假设的最小显著性水平。如果检验的统计量为t，c是从样本得到的统计量的值。左侧检验时，P值= ptc右侧检验时，P值= ptc双侧检验中，P值=单侧P值的