庖丁(Paoding)分詞的詞典原理解析

Paoding分詞過程中詞典是相關重要的一環,其特性主要有: (1)多詞典支持,詞典功能區分; (2)詞典加載入內存使用,使用預加載和Lazy Mode模式; (3)根據分詞模式,對詞典進行二次編譯; (4)詞典變更偵測,當詞典文件發生變化時,可以重新加載詞典。 1.1     詞典類型 庖丁中有多種詞典,每一種詞典在分詞過程中都不有同的意義。主要的詞典及其功能如下: (1)VocabularyD
相關文章
相關標籤/搜索