神經網絡語言模型NNLM

NNLM(Neural Network Language Model) 神經網絡語言模型對理解word2vec模型有很大的幫助, 包括對後期理解CNN,LSTM進行文本分析時有很大的幫助.   模型訓練數據 是一組詞序列w1…wT,wt∈V。其中 V 是所有單詞的集合（即訓練預料中的詞構成的詞典）, 詞向量把n-gram的離散空間轉換爲連續空間. 概率函數 $f(w_{t},w_{t-1},...

>>阅读原文<<