word2vec的細節理解

n-gram其實是作了一個n-1階的馬爾科夫假設。【用的方法應該是貝葉斯的機率理論】web word2vec是使用神經網絡訓練的一套機率語言模型。收入的參數是詞向量。【這裏的詞向量應該是屬於那種「onehot編碼」的詞向量吧？】。網絡 神經機率語言模型 對於語料庫C裏的任意一個詞w，將context（w）取爲前面n-1個詞（相似於n-gram），並且這n-1個詞的向量是首位拼接地拼起來成爲一個長向

>>阅读原文<<