My solution to cs224n assignment1(3-4)

My solution 3.word2vec (a)(b)(c)skip-gram的求導和負採樣   詞向量模型有CBOW和skip-gram模型,注意這兩個模型詞向量做中間詞和環境詞往往不一樣(雖然這樣從理論上似乎並沒有加強表達能力,但是實際操作來看又很有道理),這兩個模型都有樸素神經網絡形式。也都有兩個優化,Hierarchy softmax(用logN個Huffman樹上的二分類代替詞向量的
相關文章
相關標籤/搜索