3连续时间动态最优化问题

PAGEPAGE16第三讲连续时间动态最优化问题一、预备知识动态最优化问题历来是数学家们关注的热点和难点问题。从17世纪末的伯努利，到20世纪50年代的贝尔曼和庞特里亚金，中间经过拉格朗日、欧拉等一大批数学家的努力，才使动态最优化理论日臻完善。20世纪初，在拉姆齐（1928）的工作之后，动态数学技巧才被广泛地引入到经济学中来，目前，这些技巧已是大多数现代经济学家不可或缺的工具。上一节，我们探讨了离散时间的动态优化问题，介绍了古典的拉格朗日乘数法和比较现代的贝尔曼方程法。本节我们将在连续时间的动态优化问题中，也介绍两种方法，他们是古典的变分法和比较现代的汉密尔顿最大值原理。下面分别介绍这两种方法。二、连续时间动态最优化问题的描述例1．索罗（Solow）新古典经济增长模型的一个明显缺陷是把储蓄率看成是外生给定的。事实表明，储蓄率不是常数。为了将储蓄率内生化，堪斯(Cass，1965)和库普曼斯(Koopmans，1965)利用拉姆齐(Ramsey,1928)倡导的最优化方法，将储蓄率看作是由家庭和企业在竞争市场上追求自身利益最大化的结果，以此证明储蓄率是由模型决定的内生变量。假设经济包含两个部门，家庭和企业，家庭通过提供劳动服务从企业取得工资，通过提供资产获得利息。家庭收入分成消费和储蓄两部分。家庭在预算约束条件下按照消费效用最大化的原则进行消费和投资决策。家庭生命是无限期的。家庭大小与成年人口数量对应，成年人口按给定（外生）不变的速度增长，为方便其见，人口的变化规律由下式确定：这里，假设初期人口数量为1，然后按等比级数递增，n为人口增长率。C(t)表示t时刻的消费，c(t)=C(t)/L(t)表示人均消费。消费者问题是：(1)此处，u(c)是c的增函数并满足边际效用递减规律，u(c)满足稻田条件：,即当c趋于零时，边际效用趋于无穷大，当c趋于无穷大时，边际效用趋于零。U[c(t)]表示家庭的总效用;a(t)=A(t)/L(t)表示人均净资产;r(t)表示资产收益率;w(t)表示工资率;>0表示时间偏好率,其含义是，时间越久远，效用的贴现值越少，也叫做主观贴现率。通常假设>n以保证家庭总效用在消费给定时是有界的注：,因此，贴现因子可以写成以为底的指数形式，目的是为了便于计算。。注：,因此，贴现因子可以写成以为底的指数形式，目的是为了便于计算。最优化问题(1)的另一种表达形式可以将由第二方程求得的消费c代入到第一个方程获得：(2)这就是目标函数的泛函表示最优化问题转化为：例2．乔根森（利润最大化）模型在乔根森的新古典投资理论中，假设企业利用资本K和劳动L进行生产，其生产函数具有新古典生产函数形式。新古典生产函数遵循三个假设，即：（1）边际生产力大于零；（2）边际生产力递减；（3）规模报酬不变。P表示产品价格；M表示资本品价格；W表示劳动力的工资；表示资本折旧率。则企业的投资与资本的关系为在任意时刻企业的净收益为：如果企业贴现率r,未来净收益的贴现值可表示为：(3)是目标泛函F的广义积分。该最优化问题还可以写成：(4)一般来说，泛函积分可以表示为两种方式：一种是将泛函积分表示，如（2）和（3）的表示的最优化问题，目标函数是路径及其导数的函数。另一种表示，如（1）和（4）所示，目标函数是控制变量和状态变量的函数，目标函数受转移动态方程的约束。三、变分法3．1变分问题的一般形式前面所述的最优化问题可以用目标泛函来表示：(5)且满足初始条件：目标函数是路径的函数。我们的目的是选择一条路径使积分表达式（5）达到最大。由于变分法是利用微积分的工具发展而来，泛函极值问题是函数极值问题的发展和推广，所以，我们要求被积函数具有一阶、二阶导数。我们知道，使函数达到最大值的点是极值点，所以，使泛函达到极值的曲线或者路径为极值曲线或极值路径。3．2预备知识对含参变量x积分：I如果a,b也看作是参变量，则分步积分公式：复合函数求导法：对于，有由于函数是的函数，而都是t的函数，所以，F和都是t的复合函数。因此，我们有3．3．欧拉方程的推导第一步，将求极值曲线的问题变换为求极值点的问题。假设是已知的极值曲线，我们的目的是找到这条曲线所满足的必要条件。任意选取连接（0，A）和（0，Z）点的扰动曲线,则可以构造极值曲线的邻近路径：其中，是一个任意小的数，当它趋于0时，对于给定的和，每一个对应于一条邻近路径y，从而确定泛函的特定值。于是，泛函就成了的函数，其表达式为：由于极值曲线对应点＝0，所以，函数在＝0点达到最大值，根据一元函数极值的必要条件，必有：或者第二步：进行分步积分根据分步积分法，上式的第二个积分可以简化为：代入（）式，可得：第三步：求欧拉方程上式包含附加任意函数p(t)，泛函积分达到最优的条件应该不依赖于附加函数p(t)，事实上，我们可以证明.为证明上述结论，我们证明下面的引理：如果给定函数和任意函数满足：,则必有.证明（反证法）：如果，不失一般性，我们假设存在一点使，由于是连续函数，所以必然存在一个充分小的数使在区间上，满足。下面我们构造函数:1，当0，当，这与原假设矛盾，所以，成立。由于就相当于，所以，。这就是泛函积分最优的一阶条件，也称欧拉方程。第四步，欧拉方程的另一种表达方式由于所以，被改写成假设消费者的即时效用函数此表达式中的“-1”此表达式中的“-1”仅仅是为了表达方便，因为当趋于1时，u(c)趋于log(c)这个结果可以用洛比达法则证明。然而，由于家庭选择关于效用函数的线性变换的不变性，忽略不会影响结论。对应的泛函是：根据欧拉方程：消费者的人均消费路径，由资产收益率和时间偏好率之差决定。四、最大值原理如上所述，企业利润最大化和消费者的效用最大化也可以用另外一种形式表达。以效用最大化为例。消费者的最优化问题可以写成：目标函数：转移方程：初始条件：其中V（0）是由初始时刻0看出的目标函数值，是在0和t之间适用的平均贴现率，T是计划终端时期，它可以是有限或无限的。关于有限或无限期界之间的区别，另行讨论。变量k(t)是状态变量，变量c(t)是控制变量。它们都是时间的函数。(A.55a)式中的目标函数是瞬时幸福函数在0到T期间内的积分。这些幸福函数依次依赖于状态和控制变量k(t)和c(t)以及时间t.转移动态是一个关于资本的k(t)的微分方程；这一约束表示了控制变量c(t)的选择是如何影响状态变量k(t)的运动模式。这一关于的表达式被称为转移方程或运动方程。尽管我们只写出了一个转移方程，但实际上有一个约束的连续统，0到T之间的每个时点上一个约束。初始条件给出了状态变量k(t)的初始值，即状态变量的初始状态。最后一个约束是说在计划期界结束时所选择的状态变量k(t)，以的速度贴现后必须为非负。对于有限的T值，只要贴现率是正且有限的，这一约束就意味着。如果k(t)代表一个人的净资产且T为这个人的寿命，约束就排除了负债死亡的可能性。如果计划期界是无限的，那么该条件显示净资产可以为负而且可以在数值上永远增长下去，只要其增长率小于。这一条件排除了连环信贷或蓬齐负债手段。4．1.一阶条件的试探性推导仿照非线性最优化问题的静态解法－库恩－塔克条件，我们构造类似的拉格朗日函数此处，、分别是对于于转移方程和生命总结时的资产约束的拉格朗日乘数。由于时间变量是连续的，所以，在0到T期之间的每一个时点上约束条件都成立，所以相应就有连续统的拉格朗日乘子、，被称为共状态变量或动态拉格朗日乘子。与静态情形类似，这些共状态变量可被理解为影子价格：u(t)是在t时的1单位资本存量的增加，以在0时的效用单位表示的价格或价值。由于每个约束都等于0，每个乘积也等于0。因此所有约束的总和等于0：为了找到静态问题中的一阶必要条件，我们将对0到T之间的所有t把L对c(t)和k(t)最大化。这种方法的问题是我们并不知道如何取对k的导数。为了避免这个问题，我们通过项分部积分可以把拉格朗日函数改写为第一个积分符号内的表达式被称为汉密尔顿函数，记作：汉密尔顿函数有一个经济学解释(参见多夫曼[1969]).在一个时点上，消费者消费c(t)且拥有资本存量k(t)。这样两个变量通过两条渠道影响到效用。第一，消费和资本对效用的直接贡献，第二，消费的选择通过转移方程，影响到资本存量的变化。而资本存量的变化的价值正是资本存量的变化与影子价格的乘积。有了汉尔密顿函数之后，拉格朗日函数可改写为令和分别为状态变量和控制变量的最优时间路径。如果我们以一任意的扰动函数来扰动最优路径，那么我们可以生成一个对控制变量而言的相邻路径：当c(t)被扰动时，根据预算约束，就产生了对k(t)和k(T)的相应扰动：其中，是一个任意小的数，当它趋于0时，，对于给定的和，每一个对应于一条邻近路径，从而确定泛函的特定值。于是，泛函就成了的函数，其表达式为：现在我们可以取拉格朗日函数对的导数并令其为0：这里利用了微积分的复合函数求导法则，即化简得由于是任意的，所以，只有当方程中的每个分量都等于0时，才能保证方程()对所有的扰动路径都成立，也就是说上述关于控制变量的一阶条件表明，如果,是动态最优化问题的解，那么对于所有的t来说汉密尔顿函数对控制变量c的导数都等于0。这一结果被称为极大值原理。汉密尔顿函数对状态变量k的偏导数等于拉格朗日乘数的导数的负值。这一结果与转移方程一起常被称为欧拉方程。最后，期末的共状态变量等于与k相关的非负约束的静态拉格朗日乘子v的贴现值。五、横截性条件静态问题的库恩－塔克一阶必要条件包括了一个与不等式约束相关的互补松弛性条件。在静态问题中，这些条件表明如果一个约束不是等式，那么与之相关的影子价格就为0。在目前的动态问题中，有一个不等式约束要求在计划期末留下来的资本存量以速率贴现后不可能为负，与这一约束相关的条件要求。我们可以把这一互补松弛性条