Notes 2-Markov Chain- transition probability

一步轉移概率 現在，我們就均勻時間的Markov鏈討論下其狀態轉移的規律。假設有一Markov鏈，是一個離散狀態空間（有限或者無限）： 根據Markov過程的無記憶性和時間均勻Markov鏈的時間均勻性，可以得到狀態i到j的一步轉移概率。 一步轉移概率矩陣 另外，還可以以轉移概率矩陣的方式寫出該Markov鏈的所有一步轉移概率： 多跳轉移概率 另外，根據全概率公式以及Chapman-Kopmogo

>>阅读原文<<