馬爾可夫過程（Markov Process）和馬爾可夫鏈

對於一個隨機過程，若是其將來所處的狀態僅與其當前狀態有關，而與過去的狀態無關，則該隨機過程被稱爲Markov過程，其具備馬爾可夫性（亦「無後效性」）。spa 對於一個有限狀態自動機，其狀態集爲S={s1, s2, ..., sn}。用X = x1, x2, ..., xT表示該狀態機在t = 1, 2, ..., T時刻所處的狀態。那麼，咱們稱知足如下條件的狀態鏈X爲Markov鏈：.net （式

>>阅读原文<<