BAT機器學習面試11-15題筆記

11. L 1 L1 L1和 L 2 L2 L2正則先驗分別服從什麼分佈(第五題關聯) L 1 L1 L1服從拉普拉斯分佈， L 2 L2 L2服從高斯分佈。 所謂先驗就是優化的起跑線，有先驗的好處就是可以在較小的數據集中有良好的泛化性能，當然這是在先驗分佈是接近真實分佈的情況下得到的了，從信息論的角度看，向系統加入了正確先驗這個信息，肯定會提高系統的性能。 通俗解釋： 模型過於複雜是因爲模型嘗試

>>阅读原文<<