K-BERT詳解

論文地址：https://arxiv.org/abs/1909.07606v1  項目地址：https://github.com/autoliuweijie/K-BERT  摘要 預訓練的語言表示模型(如BERT)從大型語料庫捕獲一般的語言表示，但缺乏領域特定的知識。在閱讀領域文本時，專家會利用相關知識進行推理。爲了使機器能夠實現這一功能，我們提出了一種基於知識圖的支持知識的語言表示模型(K-BE

>>阅读原文<<