使用HMM進行中文分詞

1、代碼 # %load hmm_segment.py   # (1)經過對語料庫進行統計,創建隱馬爾科夫鏈模型(初始機率,轉移機率,觀測機率) # (2)經過維特比算法(動態規劃),確立某具體語句按其順序出現每一個字時,每一個字對應的最大可能狀態。 # (3)肯定了每一個字對應的狀態,按('BM*E|S')的模式進行分詞    # B表明詞開始,M表明詞的中間,E表明詞的結尾。S表明單字詞  M
相關文章
相關標籤/搜索