S.P. Markov链(二)

S.P. Markov链(二)

  • 4.Markov链的平稳分布和极限分布
    • 4.1 状态的周期性
    • 4.2 周期的类性质
    • 4.3 遍历态
    • 4.4 平稳分布
    • 4.5 极限概率分布
  • 5.Markov链的应用案例
    • 5.1赌徒输光问题
    • 5.2 在药物疗效检验中的应用
    • 5.3 市场份额

4.Markov链的平稳分布和极限分布

4.1 状态的周期性

S.P. Markov链(二)_第1张图片
例:
S.P. Markov链(二)_第2张图片

4.2 周期的类性质

S.P. Markov链(二)_第3张图片

4.3 遍历态

S.P. Markov链(二)_第4张图片

4.4 平稳分布

S.P. Markov链(二)_第5张图片
S.P. Markov链(二)_第6张图片
遍历态的判别准则:
在这里插入图片描述
例:正半轴上的随机游动
S.P. Markov链(二)_第7张图片
S.P. Markov链(二)_第8张图片

4.5 极限概率分布

S.P. Markov链(二)_第9张图片
S.P. Markov链(二)_第10张图片

5.Markov链的应用案例

5.1赌徒输光问题

S.P. Markov链(二)_第11张图片
S.P. Markov链(二)_第12张图片

5.2 在药物疗效检验中的应用

在这里插入图片描述
S.P. Markov链(二)_第13张图片
S.P. Markov链(二)_第14张图片

5.3 市场份额

S.P. Markov链(二)_第15张图片
0.90含义:使用A产品的顾客中有90%的顾客下一次还会使用A产品

你可能感兴趣的:(Stochastic,Processes)