深度學習--如何系統地調試並選擇超參數

咱們都知道，在深度學習乃至機器學習過程當中，有不少超參數須要調試。本文主要介紹深度學習超參數調試方法。dom 各參數重要性排序（由重要到不重要），排序根據吳恩達所述：機器學習 學習率、隱藏層單元數、mini batch大小、隱層數、學習率衰減係數。學習 根據博主調試代碼的經驗，重要性排序以下：spa 隱層數、隱藏層單元數、mini batch大小、學習率、學習率衰減係數。調試 Andrew Ng說

>>阅读原文<<