设有一个马尔科夫链状态空间为且 一步转移概率矩阵 分析是否是马尔科夫链

Question

如题所述

Answer 1

p^5=
0.5000 0.2500 0.2500
0.2500 0.2500 0.5000
0.3750 0.1250 0.5000
无零元,具遍历性
设其平稳分布为X=(x1 x2 x3)--->X=Xp---->
x3=x1
x1=x2
x1/2+x2/2=x3
--->x1=x2=x3
--->x1=x2=x3=1/3