基礎算法2:邏輯迴歸相關

【學習任務】 一、Logistic迴歸損失函數的極大似然推導:西瓜書公式3.27怎麼推來的? 二、Logistic迴歸損失函數的最優化算法:什麼是牛頓法、擬牛頓法? 答: 牛頓法 假設我們求下面函數的最小值: 假設f(x)具有連續的二階的連續偏導數,假設第K次迭代值爲xk的值,那麼可將f(X)在xk附近進行二階泰勒展開得到: 我們對上述公式求導可得: 假設其中可逆,我們就可以得到牛頓法的迭代公式爲
相關文章
相關標籤/搜索