skip-gram筆記

skip-gram目的:給定一個單詞,預測其它單詞出現的概率。 模型基本組件: one-hot vector: w i w_i wi​,爲中心節點的獨熱表示,大小爲 1 × V 1\times V 1×V, V V V爲節點個數; First matrix: W 1 W_1 W1​,第一個矩陣,大小爲 V × d V\times d V×d,每一行表示一個節點的表示向量; Second matri
相關文章
相關標籤/搜索