分詞輕鬆理解

1.常用的分詞工具 調用 jieba 2. 分詞方法1 —前向最大匹配法 注意:做分詞必須有一個詞典庫,定義最大匹配法的 max_len = 5 從前往後掃描句子: 第一次掃描: ① [我們經常有] — 這5個字的組合不在詞典中,因此 × ② [我們經常] — 這4個字的組合不在詞典中,因此 × ③ [我們經] — 這3個字的組合不在詞典中,因此 × ④ [我們] — 這2個字的組合在詞典中,因此
相關文章
相關標籤/搜索