湖南城市学院随机过程讲稿.ppt

1 7 1马尔可夫过程的一般概念 7 2马尔可夫链 7 3状态连续马尔可夫过程特性 7 4独立增量过程的基本概念 第七章马尔可夫过程 7 5泊松过程 7 6维纳过程 7 3状态连续马尔可夫过程特性 定义7 14 状态连续 时间离散的马尔可夫过程称为马尔可夫序列 A 延迟 在实际中 一般的马尔可夫序列是对连续的马尔可夫过程进行抽样得到的 例如 在对运动目标 导弹 飞机 的轨迹测量中 信号的模型常采用以下的一阶差分方程 即 A为常数 W n 为均值为 方差为 的白噪声 高斯 高斯 高斯 马尔可夫序列 7 3 1马尔可夫序列 如何求高斯特性的状态转移概率密度 高斯 马尔可夫序列X n 1 的条件均值 高斯 马尔可夫序列X n 1 的条件方差 为了确定高斯概率密度 只需要知道给定X n 的X n 1 的条件均值和条件方差就够了 如何求高斯 马尔可夫序列X n 1 的自协方差 马尔可夫序列的一般形式 A 延迟 A n B n 为确知的随时间变化的矩阵 定义7 15 状态和时间都是连续的马尔可夫过程称为连续的马尔可夫过程 7 3 2连续的马尔可夫过程 股票预期收益率 股票价格 股票价格波动率 Ito过程 股票模型 为什么说X t 是一个马尔可夫过程 取任意两个时刻tn和tn 1 对上式两边进行tn 1到tn的积分 则 X tn 的概率密度只与tn 1时刻的值有关 而与tn 1以前的值无关 因此X tn 为马尔可夫过程 X t 的均值函数 上式为简单的常系数一阶微分方程 只要初始条件mX 0 已知 就可以确定mX t X t 的方差函数 是否和马尔可夫序列一样也为零 对该式两边微分可得 X t 的方差函数 初始条件VX 0 已知即可确定VX t 对所有t t0所 X t0 与W t 不相关 故该项为零 7 4独立增量过程的基本概念 定义7 16 如果在参数集T上任意选取t1 t2 t3 tn的n个时间点 随机过程X t 的增量X t2 X t1 X t3 X t2 X tn X tn 1 是相互统计独立的随机变量 则称这类随机过程X t 为独立增量过程 独立增量过程是一种特殊的马尔可夫过程 定义7 17 设随机过程X t 的二阶矩存在 当时 有则称这类随机过程X t 为正交增量过程 定义7 18 如果独立增量过程的增量X tk X tk 1 的分布仅与时间差 tk tk 1 有关 而与tk tk 1本身无关 则称它为齐次的独立增量过程 定理7 13 对于独立增量过程 如果它还满足 则该过程也是正交增量过程 独立增量过程 泊松过程 维纳过程 7 5泊松过程 定义7 19 在 0 t 内出现事件A的总数所组成的过程称为计数过程 7 5 1计数过程 定义7 20 在计数过程中 如果在不相交叠的时间间隔内出现事件A的次数是相互统计独立的 则该计数过程为独立增量过程 定义7 21 在计数过程中 如果在 t1 t1 s 内出现事件A的次数仅与时间差s t1 s t1有关 而与起始时间t1无关 即 N t1 S N t1 仅与s有关而与t1无关 则称该计数过程为平稳增量的计数过程 7 5 2泊松过程概念 泊松过程是计数过程 而且是最重要的一类计数过程 设有一随机过程 X t t 0 如果X t 满足 1 从t 0起开始观察事件 即X 0 0 2 X t 是独立增量过程 3 该计数过程为平稳增量过程 4 在 t t t 内 当时出现一个事件概率为 5 在 t t t 内 当时出现事件二次及二次以上的概率为 则称该计数过程为泊松过程 定理7 14 泊松过程在时间间隔 t0 t0 t 内n次出现事件A的概率为 证明 略 7 5 3泊松过程的统计特性 数学期望 均方值与方差 自相关函数 独立增量 自协方差函数 7 5 4泊松过程的分布特性 1 各次事件间的时间间隔分布 设 X t t 0 是参数为 的泊松过程 X t 表示到t时刻为止事件A发生的次数 Wn表示第n次事件A发生的时间 n 1 也称为第n次事件A的等待时间 或到达时间 Tn表示第n 1次事件A发生到第n次事件A发生的时间间隔 时间间隔Tn的分布为 概率密度为 Tn的平均值 2 等待时间分布 21 用Sn表示从时间t 0开始到达第n次事件出现所需要的时间称为第n次事件的等待时间 分布函数 22 概率密度函数 3 达到时间分布 设泊松过程 如果已知在 0 t 内有一个A事件出现 求这个以事件达到时间的条件分布 即 概率密度函数为 24 4 有两个相互统计独立的泊松过程 设泊松过程 这两个过程的参数为 1和 2 设代表第一个过程中出现第一次事件所需的时间 代表第二过程中出现第一次事件所需的时间 现在研究第一过程出现第一次事件先于第二过程出现第一次事件的概率 即 5 泊松过程 设泊松过程 这两个过程的参数为 1和 2 设代表第一个过程中出现第k次事件所需的时间 代表第二过程中出现第一次事件所需的时间 现在研究第一过程出现第k次事件先于第二过程出现第一次事件的概率 即 7 6维纳过程 布朗运动过程 1 布朗运动简介 英国植物学家布朗 Brown 在显微镜下 观察漂浮在平静的液面上的微小粒子 发现它们不断地进行着杂乱无章的运动 这种现象称为布朗运动 爱因斯坦 Enisten 1905年提出一种理论 认为微粒的这种运动是由于受到大量随机的 相互独立的分子碰撞的结果 布朗运动计算机模拟结果 n 100 n 500 n 1000 n 5000 n 10000 n 50000 2 维纳过程的数学模型 则称此过程为维纳过程 3 维纳过程的特征 维纳过程增量的分布只与时间差有关 所以维纳过程是齐