【ACL2020論文嚐鮮】何時採用BERT更加有效？

來自：AI自然語言處理與知識圖譜 何時採用BERT更加有效？ 導    語： 有些研究表明，BERT並非全能，並非處處完勝，那麼BERT何時有效？目前的預訓練模型昂貴複雜，讓人無福享受，本文是 ACL 2020 一篇詞向量的工作，該文探究了影響詞向量的兩大因素：訓練數據的規模和文本語言的特性，並在三種類型的詞向量上面分析：BERT詞向量、Glove詞向量和隨機詞向量。這篇論文是一篇預訓練模型的有效

>>阅读原文<<