cs224d 作業 problem set2 (三) 用RNNLM模型實現Language Model，來預測下一個單詞的出現

  今天將的還是cs224d 的problem set2 的第三部分習題， 原來國外大學的系統難度真的如此之大，相比之下還是默默地再天朝繼續搬磚吧 下面講述一下RNN語言建模的數學公式:   給出一串連續的詞x1,x2...xt關於預測其後面緊跟的詞xt+1的建模方式是: vj是詞庫中的某個詞。實現一個循環神經網絡，此網絡利用隱層中的反饋信息對"歷史記錄"x1,x2...xt進行建模: $h^{(

>>阅读原文<<