用【Mathematica数学软件】求解“离散马尔科夫”模型习题

用【Mathematica数学软件】求解“离散马尔科夫”模型习题: 马尔可夫链(Markov Chain, MC)是概率论和数理统计中具有马尔可夫性质(Markov property)且存在于离散的指数集(index set)和状态空间(state space)内的随机过程(stochastic process)