OpenAI:通過無監督學習提高語言理解能力

文章來源:ATYUN AI平臺  研究者通過一個可擴展的,與任務無關的系統獲得了一系列不同語言任務的最新成果,這一系統也即將發佈。此方法結合了兩種現有的想法:Transformer和無監督的預訓練。這些結果說明將監督學習方法與無監督預訓練結合很好。 這是許多人探索過的想法,研究者希望這樣的結果能激發更多的研究,將這個想法應用到更大、更多樣化的數據集上。 系統分兩個階段工作:首先以非監督的方式在大量
相關文章
相關標籤/搜索