2、列出方程组：利用状态转移矩阵，可以列出方程组，以求解每个状态的稳态概率。3、求解方程组：对于给定的状态转移矩阵，求解方程组可以得到第二个时期的稳态概率向量。4、检验结果：得到稳态概率向量之后，检验结果的有效性。