最小二乘、極大似然估計、梯度下降法

最小二乘、極大似然估計、梯度下降法，是機器學習中常出現的名詞。 最小二乘和極大似然是目標函數，梯度下降是優化算法。 機器學習的基本框架基本是模型、目標和算法。 對於一個數據集，根據數據的特點和目的來選擇相應的模型。 選擇了模型後，爲了擬合或分類數據，所以要構造一個目標函數cost function。 構造cost function後，有一部分目標函數，可以直接通過求導求解。 而大部分問題，尤其是l

>>阅读原文<<