CS224n (Spring 2017) assignment 1-----3. word2vec

注:這種問題首先確定各個變量的維度,然後可以按照正常的標量求導法則進行求導(其實在向量或者tensor的情況下多數是jacobian),根據CS231n中的derivative的維度來確定求導後各個變量的維度,最後調整一下維度,使其與最終導數的維度保持統一。 Vc的第一項寫錯了,是乘以U0. 就是按照之前推出的公式進行編碼 normalize:x每個元素都除以各行平方和的平方根。 softmaxC
相關文章
相關標籤/搜索