論文賞析【EMNLP19】語言模型效果不好?也許你可以給它添加一點句法信息

論文地址 PaLM: A Hybrid Parser and Language Model[1] 介紹 本文介紹瞭如何將一個句法分析器融入到神經網絡語言模型中,這樣在利用了句法信息增強語言模型效果的同時,還可以去掉句法上的監督信號,用來無監督地生成句法樹。 其實將句法信息加入到語言模型中地思想之前就有了,比如PRPN(Shen et al.[2])和ON-LSTM(Shen et al.[3])。
相關文章
相關標籤/搜索