L1、L2正則VS L1、L2 loss

 1.L1、L2正則——參數空間         L1範數表達式爲:, L2範數表達式: L1正則(上圖左),使得某些特徵量變爲0,因此具有稀疏性,可用於特徵選擇; L2正則(上圖右),整體壓縮特徵向量,使用較廣。 2.  L1、L2損失——loss函數 Smooth L1是L1的變形,用於Faster RCNN、SSD等網絡計算損失,比較上圖綠色曲線和紅色曲線,我們可以看到綠色曲線(Smooth
相關文章
相關標籤/搜索