ELMo

論文鏈接：https://arxiv.org/abs/1802.05365         此論文提出了一種新的表示詞語的方法，用於解決如下問題：         （1） 詞的複雜特徵         （2） 在不同語境下詞的多義性         該論文提出的模型，使用biLM（雙向語言模型）在大型語料上進行預訓練，通過內部隱藏狀態得到詞向量，這種表示可以很容易的用在已經存在的模型並明顯提高解決

>>阅读原文<<