NLP學習12_評估詞向量、skipgram的缺點、subword

評估詞向量 評估方式一:降維。訓練好的詞向量,首先要進行降維,使用工具TSNE降維到2維,這樣映射到二維空間,便於觀察詞向量訓練後是否能將同類詞彙集到一塊兒 評估方式二:類似度對比,選定兩個詞向量,計算類似度,而後與人工標註的類似度進行對比 評估方式三:類比。計算woman和man的距離,而後在詞庫中找與girl距離跟woman和man距離相近的詞 web 詞向量的應用 傳統的統計作法是特徵工程,
相關文章
相關標籤/搜索