分詞

涉及到的類：IKAnalyzer，TokenStream，CharTermAttribute

TokenStream的工做流程：

一、實例化Tokenizer或TokenFilter,，添加屬性到AttributeSource，或從AttributeSource中獲取屬性。

二、調用reset()方法

三、從流中和存儲本地引用檢索想要訪問全部屬性

四、調用increamStoken()方法，直到返回false

五、調用end（）方法執行任何end-of-stream操做

六、調用close()方法在結束使用TokerStream釋放一些資源

end()、reset()、close()的覆蓋一般要調用super.end()、super.reset()、super.close()