ICLR 2020|NLP預訓練模型的全新範式：對比學習

時間 2020-06-06

標籤 iclr nlp 訓練模型全新範式對比學習简体版

原文原文鏈接

生成式模型有着其天生的優點，即學習到豐富的特徵，但它也有廣受詬病的肯定。判別式目標函數——長期以來被認爲是無用的。這是由於，判別式模型一般不是直接擬合原有的分佈流形，學習到的特徵較爲單一。可是，最近一些工做的基於對比學習的自監督學習框架，表現十分出色。微信生成式模型有着其天生的優點，即學習到豐富的特徵，但它也有廣受詬病的肯定。判別式目標函數——長期以來被認爲是無用的。這是由於，判別式模型一般不是

>>阅读原文<<

1. ICLR 2020|NLP預訓練模型的全新範式：對比學習
2. ICLR 2020 | ELECTRA：新型文本預訓練模型
3. 預訓練模型&遷移學習
4. 預訓練模型遷移學習
5. python模型訓練與預測練習
6. ICLR 2020| VL-BERT：預訓練視覺-語言模型
7. ICLR 2020|預訓練圖神經網絡模型
8. 圖上的預訓練 ICLR 2020
9. NLP預訓練模型
10. ELECTRA: NLP預訓練模型
更多相關文章...
• PHP 類型比較 - PHP教程
• ASP.NET MVC - 模型 - ASP.NET 教程
• Tomcat學習筆記（史上最全tomcat學習筆記）
• Kotlin學習（二）基本類型

相關標籤/搜索