深度學習: 鞍點

Introduction 關於 鞍點 的定義: [1]: 鞍點附近的某些點比鞍點有更大的代價,而其他點則有更小的代價。 [2]: 一個不是局部極值點的駐點稱爲鞍點。 Note: 駐點:一階導數爲0; 拐點:二階導數爲0。 Example 單變量函數: 鞍點處的一階導爲0,二階導換正負號。 多變量函數: 鞍點處,在某些方向上是峯頂,在其他方向上是谷底。 Note: 在高維空間中,局部最優很罕見,鞍點
相關文章
相關標籤/搜索