马尔可夫随机过程基础点

  1. 马尔可夫转移概率矩阵

马尔可夫随机过程基础点_第1张图片
马尔可夫转移矩阵是按照行排列的。

  1. 马尔可夫转移概率(C-K方程)的三种形式:
    P ( u + v ) = P ( u ) P ( v ) P(u+v)=P(u)P(v) P(u+v)=P(u)P(v)
    P i j ( u + v ) = ∑ k = 0 n P i k ( u ) P k j ( v ) P_{ij}(u+v)=∑_{k=0}^{n} P_{ik}(u)P_{kj}(v) Pij(u+v)=k=0nPik(u)Pkj(v)
    p j ( n ) = ∑ i = 1 p i ( 0 ) P i j p_j(n)=∑_ {i=1 } p_i(0)P_{ij} pj(n)=i=1pi(0)Pij

  2. 马尔科夫链的极限分布

马尔可夫随机过程基础点_第2张图片

你可能感兴趣的:(概率论和数理统计,学习)