馬爾科夫過程詳解

馬爾科夫鏈隨機過程之因此如此重要，在於其平穩分佈（stationary distribution），也即對它而言，它存在一個平穩分佈。css 1. 記號的說明 q(i,j)==q(j|i)==q(i→j)   表示一個轉移矩陣爲  Q 的馬氏鏈，從狀態  i 轉移到狀態  j 的機率python 2. 馬氏性 Xn  標識時刻  n  的狀態，關於馬氏性的數學表達爲：  app P(Xn+1=k|

>>阅读原文<<