模型評估和選擇

評估方法。 1），留出法。 將數據集D劃分爲兩個互斥的子集，一個作爲測試集，一個作爲驗證集。爲保證準確性，可以隨機，可以分層採樣。 一般是2/3-4/5用作訓練，其餘用作測試。 2）， 交叉驗證法。 平均劃分爲K個大小相似得互斥子集，儘量數據分佈與原數據集保持一致（可以用分層），每次用一個作爲驗證集，其他作爲訓練集，訓練K次。最後結果取均值。 留一法： 有m個樣本點，m=k. 優點：不受隨機樣本劃

>>阅读原文<<