範數小知識

L0範數是指向量中非0的元素的個數。(L0範數很難優化求解) L1範數是指向量中各個元素絕對值之和 L2範數是指向量各元素的平方和然後求平方根 L1範數可以進行特徵選擇,即讓特徵的係數變爲0. L2範數可以防止過擬合,提升模型的泛化能力,有助於處理 condition number不好下的矩陣(數據變化很小矩陣求解後結果變化很大) (核心:L2對大數,對outlier離羣點更敏感!) 下降速度:最
相關文章
相關標籤/搜索