Notes 2-Markov Chain- transition probability

一步转移概率 现在，我们就均匀时间的Markov链讨论下其状态转移的规律。假设有一Markov链，是一个离散状态空间（有限或者无限）： 根据Markov过程的无记忆性和时间均匀Markov链的时间均匀性，可以得到状态i到j的一步转移概率。 一步转移概率矩阵 另外，还可以以转移概率矩阵的方式写出该Markov链的所有一步转移概率： 多跳转移概率 另外，根据全概率公式以及Chapman-Kopmogo

>>阅读原文<<