版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
1、2.3 一元线性回归模型的参数估计(Estimation of Simple Linear Regression Model) 一、参数的普通最小二乘估计(OLS) 二、参数估计的最大或然法(ML)三、参数估计的矩法(MM) 四、最小二乘估计量的性质 五、参数估计量的概率分布及随机干 扰项方差的估计 如果线性方程组的系数行列式D不等于零, 则方程组有唯一解 (1)CRAMMER法则解CRAMMER法则应用所以 1、Crammer法则只能用于求解方程个数与未知数 个数相等的线性方程组;2、Crammer法则只能求得系数行列式不为零时的 线性方程组的唯一解; 即如果方程个数与未知数个数不相等,或系
2、数 行列式等于零,则Crammer法则失效。3、计算量大,要计算 n+1 个 n 阶行列式的值。 CRAMMER法则应用局限一、参数的普通最小二乘估计(OLS)1、最小二乘原理根据被解释变量的所有观测值与估计值之差的平方和最小的原则求得参数估计量。 为什么取平方和?给定一组样本观测值(Xi, Yi)(i=1,2,n)要求样本回归函数尽可能好地拟合这组值.方程组(*)称为正规方程组(normal equations)。 2、正规方程组3、参数估计量记上述参数估计量可以写成: 称为OLS估计量的离差形式(deviation form)。 由于参数的估计结果是通过最小二乘法得到的,故称为普通最小二乘
3、估计量(ordinary least squares estimators)。 顺便指出 ,记则有 可得 (*)式也称为样本回归函数的离差形式。(*)注意: 在计量经济学中,往往以小写字母表示对均值的离差。 4、“估计量”(estimator)和“估计值” (estimate)的区别 如果给出的参数估计结果是由一个具体样本资料计算出来的,它是一个“估计值”,或者“点估计”,是参数估计量的一个具体数值;如果把上式看成参数估计的一个表达式,那么,则是Yi的函数,而Yi是随机变量,所以参数估计也是随机变量,在这个角度上,称之为“估计量”。 5、例题(采用Eviews进行OLS估计)数据OLS估计二、
4、参数估计的最大似然法(ML)1、最大似然法最大似然法(Maximum Likelihood,ML),也称最大或然法,是不同于最小二乘法的另一种参数估计方法,是从最大或然原理出发发展起来的其它估计方法的基础。基本原理:当从模型总体随机抽取n组样本观测值后,最合理的参数估计量应该使得从模型中抽取该n组样本观测值的概率最大。ML必须已知随机项的分布。2、估计步骤Yi的分布Yi的概率函数 Y的所有样本观测值的联合概率似然函数 对数似然函数 对数似然函数极大化的一阶条件结构参数的ML估计量3、讨论在满足一系列基本假设的情况下,模型结构参数的最大似然估计量与普通最小二乘估计量是相同的。但是,分布参数的估计
5、结果不同。4、例题ML估计三、参数估计的矩法(MM)矩估计的基本原理是用相应的样本矩来估计总体矩。对一元线性回归模型,在满足基本假设时,存在两个总体矩条件。相应的样本矩条件构成关于待估参数的正规方程组。求解该方程组,得到参数估计。参数估计与OLS估计相同。由基本假设,写出两个总体矩条件 相应的样本矩条件构成正规方程组MM估计 例2.3.1:在上述家庭可支配收入-消费支出例中,对于所抽出的一组样本数,参数估计的计算可通过下面的表2.3.1进行。表2.3.1 参数估计计算表 因此,由该样本估计的回归方程为: 四、最小二乘估计量的性质 当模型参数估计出后,需考虑参数估计值的精度,即是否能代表总体参数
6、的真值,或者说需考察参数估计量的统计性质。 一个用于考察总体的估计量,可从如下几个方面考察其优劣性: (1)线性性,即它是否是另一随机变量的线性函数;1、概述(2)无偏性,即它的均值或期望值是否等于总体的真实值;(3)有效性,即它是否在所有线性无偏估计量中具有最小方差。(4)渐近无偏性,即样本容量趋于无穷大时,是否它的均值序列趋于总体真值;(5)一致性,即样本容量趋于无穷大时,它是否依概率收敛于总体的真值;(6)渐近有效性,即样本容量趋于无穷大时,是否它在所有的一致估计量中具有最小的渐近方差。 这三个准则也称作估计量的小样本性质。 拥有这类性质的估计量称为最佳线性无偏估计量(best line
7、r unbiased estimator, BLUE)。 当不满足小样本性质时,需进一步考察估计量的大样本或渐近性质:2、高斯马尔可夫定理(Gauss-Markov theorem)在给定经典线性回归的假定下,最小二乘估计量是具有最小方差的线性无偏估计量。下面分别对最小二乘估计量的线性性、无偏性和有效性进行证明,作为不熟悉的同学的自学内容。证:易知故同样地,容易得出 (2)证明最小方差性其中,ci=ki+di,di为不全为零的常数则容易证明由于最小二乘估计量拥有一个“好”的估计量所应具备的小样本特性,它自然也拥有大样本特性。 五、参数估计量的概率分布及随机干扰项方差的估计1、参数估计量的概率分布 2、随机干扰项的方差2的估计 2又称为总体方差。 由于随机项i不可观测,只能从i的估计残差ei出发,
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2026-2027学年上学期单元测试高三化学模拟卷及答案解析
- 2026-2027学年上学期单元测试九年级道德与法治测试卷
- 2025高处作业拆除作业考前必刷题及答案
- 2025管理会计师成本管理分阶段练习题及答案
- 光伏跟踪支架微风跟踪策略方案
- 厂房设备地沟混凝土浇筑施工
- 交通枢纽绿化带景观优化方案
- 采购合同履行催办函3篇范本
- 智能硬件厂商产品测试与认证标准手册
- 餐饮业厨师长与菜品研发部绩效评估表
- 大学函数极限题目及答案
- JG/T 271-2019粘钢加固用建筑结构胶
- 医院挂账结算协议书
- 入团考试时事试题及答案解析
- 《价值流图分析流程》课件
- 高中英语北师大版必修第一册全册单词表(按单元编排)
- XX等级测评报告模板-2021版
- 农民专业合作社和家庭农场的经营管理
- YS/T 341.1-2006镍精矿化学分析方法 镍量的测定 丁二酮肟沉淀分离 EDTA滴定法
- GB/T 12600-2005金属覆盖层塑料上镍+铬电镀层
- GB/T 11835-2016绝热用岩棉、矿渣棉及其制品
评论
0/150
提交评论