神經網絡調參指南筆記

2020年2月2日 1、神經網絡調參指南筆記 可視化訓練過程中每個step(batch)的loss。 將訓練日誌在打印到屏幕上的同時也寫入到本地磁盤。 代碼中完成pytorch等訓練過程可視化環境的配置,最少要可視化出訓練loss曲線。 初始調參階段記得關閉L2、Dropout等用來調高模型泛化能力的超參數吶, 預設值合理的batch size,一般64不錯 數據集不均衡的話建議使用更大一點的值,
相關文章
相關標籤/搜索