Word2vec 入門（skip-gram部分)

Skip-gram 給定句子中一個特定的詞（input word），隨機選它附近的一個詞。網絡的目標是預測 我們選到這個附近詞的概率。 輸入，輸出 取窗口大小爲2（前後兩個詞）：得到一些詞對： 如之中的（quick, brown) 訓練神經網絡時： 輸入quick的one-hot編碼, 輸出層softmax分層的brown的概率應該是最大的 隱層： 我們訓練一個簡單的網絡來執行一個任務，但是我們實

>>阅读原文<<