乘風破浪的PTM：兩年來預訓練模型的技術進展

作者：張俊林 來源：深度學習前沿筆記 鏈接：https://zhuanlan.zhihu.com/ p/254821426 導讀：Bert模型自18年10月推出，到目前爲止快兩年了。它卜一問世即引起轟動，之後，各種改進版本的預訓練模型（Pre-Training Model, PTM）與應用如過江之鯽，層出不窮。Bert及它的繼任者們，確實也不孚衆望，在NLP各個領域攻城略地，所向披靡，多種NLP數

>>阅读原文<<