马尔科夫过程_第1页
马尔科夫过程_第2页
马尔科夫过程_第3页
全文预览已结束

下载本文档

版权说明：本文档由用户提供并上传，收益归属内容提供方，若内容存在侵权，请进行举报或认领

文档简介

1、第三章 马尔科夫过程马尔科夫（Markov）过程是无后效性的随机过程。它在近代物理、生物学、管理科学、信息与计算科学等领域都有重要应用。本章主要介绍马尔科夫过程的定义、转移概率及其关系、转移概率的极限性态，并着重讨论马尔科夫链以及两种特殊的马尔科夫过程-泊松过程和维纳过程。§3.1 马尔科夫过程及其转移概率分布一、马尔科夫过程概念在自然界中有一类随机过程具有所谓的无后效性：当过程在时刻所处状态为已知时，过程在时刻所处状态的概率特征仅与过程在时刻所处状态有关，而与过程在时刻所处状态无关。如果把时刻作为“现在”，把时刻之后的时刻作为“将来”，把时刻之前的时刻作为“过去”，那么无后效性也可

2、解释为：过程在已知现在状态的条件下，将来的状态仅与现在的状态有关，而与过去的状态无关。例1一个质点在实轴上做随机移动，它在零时刻处于原点位置，每个单位时间左移或右移一个单位长度。左移的概率为，右移的概率为。该质点在第个单位时刻到达的位置记为，这是一个随机序列。很显然，已知质点的现在位置，将来的情况仅与现在的位置有关，而与过去的情况无关。所以随机序列具有无后效性。例2电话交换台在时刻之前（时间内）到来的呼唤次数是一个随机过程。已知现在时刻之前到来的呼唤次数，未来时刻之前到来的呼唤次数仅与时刻之前到来的呼唤次数有关，这是因为时间内到来的呼唤次数等于时间内到来的呼唤次数加上时间内到来的呼唤次数，而内到来的呼唤次数与时刻之前到来的呼唤次数相互独立。因此，随机过程具有无后效性。例3将一颗花粉粒子放在水面上，由于水分子的撞击，它在水面上随机地游动，这种游动在物理学中称为布朗运动。在水面上作直角坐标系，取花粉粒子运动的起点位置为原点。花粉颗粒在时刻所处位置的横坐标和纵坐标分别记为和。显然花粉颗粒的随机游动具有无后效性，因

人人文库> 全部分类> 教育资料 > 课件下载

温馨提示

  • 1. 本站所有资源如无特殊说明，都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等，如果需要附件，请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸，网页内容里面会有图纸预览，若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间，仅对用户上传内容的表现方式做保护处理，对用户上传分享的文档内容本身不做任何修改或编辑，并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容，请与我们联系，我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论