【AI不惑境】模型壓縮中知識蒸餾技術原理及其發展現狀和展望

大家好,這是專欄《AI不惑境》的第十一篇文章,講述知識蒸餾相關的內容。 進入到不惑境界,就是向高手邁進的開始了,在這個境界需要自己獨立思考。如果說學習是一個從模仿,到追隨,到創造的過程,那麼到這個階段,應該躍過了模仿和追隨的階段,進入了創造的階段。從這個境界開始,講述的問題可能不再有答案,更多的是激發大家一起來思考。 作者&編輯 | 言有三 知識蒸餾是非常經典的基於遷移學習的模型壓縮技術,在學術界
相關文章
相關標籤/搜索