深入淺出Lucene Analyzer

爲什麼80%的碼農都做不了架構師？>>>    Analyzer，或者說文本分析的過程，實質上是將輸入文本轉化爲文本特徵向量的過程。這裏所說的文本特徵，可以是詞或者是短語。它主要包括以下四個步驟：  分詞，將文本解析爲單詞或短語 歸一化，將文本轉化爲小寫 停用詞處理，去除一些常用的、無意義的詞 提取詞幹，解決單複數、時態語態等問題 Lucene Analyzer包含兩個核心組件，Tokenizer

>>阅读原文<<