機器學習|最小二乘法的概率解釋

在擬合數據時，爲什麼選擇最小二乘來作爲誤差函數呢？ 雖然不明白爲什麼，但是一直覺得很有道理的樣子。最小二乘或平方差作爲誤差函數，是基於一些概率假設推導出了這個公式。這裏有一些概率上的解釋。讓我們慢慢來看。 1.允許誤差存在 首先要說明的，所有的預測值都不可能完美地與真實值契合，所以誤差必然存在，而我們的目的就是如何讓誤差儘可能地小。這樣就可以假設有一組θ，使真實的數據存在以下關係式，y(i)表示真

>>阅读原文<<