CS224N個人筆記

1. 詞向量 word2vec做詞向量表示，原理如下： 特點：考慮詞與詞之間的相似性 one-hot類型的詞向量表示的不合理之處在於，沒有考慮詞彙之間的相似性。比如，hotel和motel分別表示爲(1,0,0)、(0,1,0)，二者的內積爲0，正交關係，相似性爲0，但是這兩個詞是近義詞。 word2vec考慮了詞彙之間的相似性，即給定中心詞彙(center word)向量的前提下，計算上下文詞彙

>>阅读原文<<