NLP——ELMO模型

NLP——ELMO模型 1、模型預訓練和模型微調 作爲近些年來深度學習的兩個應用思路，預訓練和模型微調爲後面的任務提供了良好的基礎。所以，我們先來介紹一下預訓練和模型微調的概念。 1.1 預訓練 我們從一個例子開始，假設我們接到的是一個文本分類的任務，需要對數據集A中的文本進行文本分類，我們的首先要做的是對於A中的文本進行分詞，生成詞向量。然後採用某一個深度學習的模型。訓練分類的參數。現在，我們將

>>阅读原文<<