word2vec理解

word2vec是利用一個三層神經網絡,將one-hot編碼訓練成維度更小的詞向量,爲後面的自然語言處理作出鋪墊。 也就是說,它是自然語言處理的第一步。   CBOW模型     CBOW(Continuous Bag-of-Words Model)是一種根據上下文的詞語預測當前詞語的出現概率的模型,其圖示如上圖左。CBOW是已知上下文,估算當前詞語的語言模型;   一般來說,三層神經網絡應該是這
相關文章
相關標籤/搜索