看看擬牛頓法

擬牛頓法 主要是針對無約束最小化問題的。 這裏求導其實是把右邊項看作 x x x 的函數，只對 x x x 求導， x k x_k xk​ 看作常數項。 昨天剛看到的 line search: 注意這裏我們取了上一次 x k x_k xk​ 的值，做了類似於差分的效果。 一個矩陣小 trick Sherman-Morrison公式 設 A ∈ R n A \in R^n A∈Rn 爲非奇異方陣，

>>阅读原文<<