试说明相应齐次马尔可夫链是遍历的,并求其极限分布:
解 由于的所有元素都大于0,因此存在自然数,使得该齐次马尔可夫链的一步转移概率矩阵的次幂的每个元素都大于0,从而此齐次马尔可夫链是遍历的.
以下求极限分布:
解法一 用定义 由于与相似,因此
其中,又,故
从而极限分布为
解法二 利用遍历性
由于该齐次马尔可夫链是遍历的,因此它的平稳分布就是极限分布,设极限分布为,求解方程组
即
得
所以极限分布为下载本文