模型的改善與泛化（偏差方差與交叉驗證）

1 偏差與方差 1.1 定義 在機器學習的建模中，模型普遍的誤差都是來自於偏差（bias）和方差（variance）。那什麼又是偏差與方差呢 如上圖所示[1]，假設你拿着一把衝鋒槍打擊紅色的靶心，在你連打數十槍後出現了以下四種情況： 所有子彈都密集打在靶心旁邊的位置，這就是典型的方差小（子彈很集中），偏差大（距離靶心甚遠）； 子彈都散落在靶心周圍的位置，這就是典型的方差大（子彈很散亂），偏差小（都

>>阅读原文<<