Elasticsearch區分Analyzer之Tokenizer

Analyzer包含兩個核心組件，Tokenizer以及TokenFilter。二者的區別在於，前者在字符級別處理流，然後者則在詞語級別處理流。Tokenizer是Analyzer的第一步，其構造函數接收一個Reader做爲參數，而TokenFilter則是一個相似的攔截器，其參數能夠是TokenStream、Tokenizer。php Tokenizer的類結構圖：函數 各種的介紹：spa 1.

>>阅读原文<<