文本挖掘的分詞原理

from ： http://www.cnblogs.com/pinard/p/6677078.html 　　　　在做文本挖掘的時候，首先要做的預處理就是分詞。英文單詞天然有空格隔開容易按照空格分詞，但是也有時候需要把多個單詞做爲一個分詞，比如一些名詞如「New York」，需要做爲一個詞看待。而中文由於沒有空格，分詞就是一個需要專門去解決的問題了。無論是英文還是中文，分詞的原理都是類似的，本文就對

>>阅读原文<<