一份機器學習模型離線評估方法的詳細手冊

首先需要知道的是，機器學習想要能夠解決業務中的問題，簡單可以分爲兩個階段：離線和線上（離線指的是模型未部署到生產環境之前，線上是指模型部署到生產環境之後）。在離線階段，首先需要先訓練一個模型，然後對訓練好的模型進行離線評估來了解下模型的性能情況。 我們知道，模型訓練的時候使用的數據集是訓練集，模型在測試集上的誤差近似爲泛化誤差，而我們更關注的就是泛化誤差，所以在離線階段我們需要解決一個問題，那就是

>>阅读原文<<