再談線性迴歸與邏輯迴歸-損失函數

高級機器學習筆記 線性迴歸的損失函數我們採用的是均方誤差函數。而邏輯迴歸採用的是交叉熵。 均方誤差 對於線性函數來說,我們使用平方形式的時候,使用了「最小二乘」的思想,就是用平方來度量估計值與真實值的距離,使其達到最小。而且,如果假設誤差服從正態分佈,它與最大似然估計在本質上是相同的。 如下面兩張圖所示: 誤差滿足正太分佈的話,那麼我們可以讓似然函數L(w)取最大的值,然後可以求出紅框中的形式,也
相關文章
相關標籤/搜索