範數小知識

L0範數是指向量中非0的元素的個數。(L0範數很難優化求解) L1範數是指向量中各個元素絕對值之和 L2範數是指向量各元素的平方和然後求平方根 L1範數可以進行特徵選擇，即讓特徵的係數變爲0. L2範數可以防止過擬合，提升模型的泛化能力，有助於處理 condition number不好下的矩陣(數據變化很小矩陣求解後結果變化很大) （核心：L2對大數，對outlier離羣點更敏感！） 下降速度：最

>>阅读原文<<