馬爾可夫鏈

3 馬爾可夫鏈 考慮由多個隨機變量組成的系統，其演化可由一個隨機過程描述，隨機變量 X n X_n Xn​在時刻n取值 x n x_n xn​稱爲系統在n時刻的狀態。隨機變量所有可能的值構成的空間稱爲系統的狀態空間。如果隨機過程 { X n , n = 1 , 2 , . . . } \lbrace X_n,n =1,2,... \rbrace {Xn​,n=1,2,...}的構造使得 X n +

>>阅读原文<<