【論文精讀】TACRED Revisited: A Thorough Evaluation of the TACRED Relation Extraction Task

這篇文章是ACL2020上的文章,來德國研究中心的Christoph Alt。 文章主要研究的是Tacred的數據集合中的Dev和Test集的標註錯誤,並且做了標註錯誤類型的分組,做了對比試驗驗證這些不同的錯誤原因對四個對比模型的影響,得出了 per:loc 和 same nertag&positive兩個group的樣例容易被分類錯誤的結論,並且認爲將instance難度考慮到評估過程是有必要的
相關文章
相關標籤/搜索