Glove模型筆記

Glove 優點:融合了矩陣分解Latent Semantic Analysis (LSA)的全局統計信息和local context window優勢。融入全局的先驗統計信息,可以加快模型的訓練速度,又可以控制詞的相對權重。 ​ 模型 詞向量模型: w i T w ~ j + b i + b ~ j = log ⁡ ( X i j ) w_{i}^{T} \tilde{w}_{j}+b_{i}+
相關文章
相關標籤/搜索