马尔科夫过程:用分布函数来表示马尔科夫性,设随机过程 的状态空间为 [5]。如果对时间 的任意 个数值 , , ,在条件 下, 的条件分布函数恰等于在条件 下 的条件分布函数,[5]即
 
于是称此过程 具有马尔科夫性或无后效性,此过程为马尔科夫过程[5]。
2.2 马尔科夫链
   设随机过程 的状态空间为: ,若对任意的 ,及  有
 
则称 为离散时间、离散状态的马尔科夫过程,简称马尔科夫链[6]。
2.3 转移概率和转移概率矩阵
现在记链的状态空间 。用条件分布律来表示马尔科夫性,即对任意的正整数 , 和 ,有
 
即有条件概率
 
为马尔科夫链在时刻 处于状态 条件下,在时刻 转移到状态 的转移概率。
由于链在时刻 从任何一个状态 出发,到另一时刻 ,必然转移到 状态中的某一个,所以
 ,其中 =1,2, …。
当转移概率 只与 及时间间距 有关时,我们称转移概率具有平稳性。在此情况下转移概率
上一篇:利用不动点定理证明欧拉方程组局部经典解的存在性
下一篇:插值在求解结构动力响应中的应用

隐马尔可夫链的应用研究

马尔科夫链在经济生活中的应用

连续时间马尔可夫链的性质及应用

股票大盘指数马尔可夫预测法

马尔科夫链Markov链的理论及应用

马尔科夫链上海房地产价格的监管与预测

C#学校科研管理系统的设计

AT89C52单片机的超声波测距...

公寓空调设计任务书

承德市事业单位档案管理...

医院财务风险因素分析及管理措施【2367字】

中国学术生态细节考察《...

神经外科重症监护病房患...

志愿者活动的调查问卷表

国内外图像分割技术研究现状

10万元能开儿童乐园吗,我...