bias and variance 的簡單理解

假設有下列模型，我們需要選擇其中一個較爲合適的模型作爲最終的預測模型。 我們知道隨着維度的增加其曲線也更加複雜，能夠更好地擬合訓練集上的數據，此時bias（偏差）很小，但是很可能在預測時表現卻不盡如人意（過度擬合）。 比較左圖和右圖，相較而言中圖variance（方差）更小，而右圖bias（偏差）更小。但是中圖更能夠代表數據趨勢，而右圖爲了擬合數據，在某些地方進行了更大的妥協。左圖明顯bias（偏

>>阅读原文<<