關於馬爾科夫鏈

參考視頻與文獻： https://www.bilibili.com/video/av19178276?from=search&seid=6794631373554394286 https://mp.weixin.qq.com/s/NYtlrmTIoOcRThbiZUIALQ 如果馬從棋盤位置開始隨機跳，問跳回原地期望是多少步。 馬爾科夫平衡狀態： 設有馬爾科夫鏈 , 其狀態空間爲 S，轉移概率矩陣

>>阅读原文<<