GAN網絡的模型坍塌和不穩定的分析

衆所周知，GAN異常強大，同時也非常難以訓練。主要有以下亮點原因： 模型坍塌(mode collapse) 難以收斂和訓練不穩定(convergence and instability) GAN網絡的一般表達式可以表示爲： 利用minmax獲得公式1 給定G，求D的最優化2 針對D進行求導： 獲取最優解： 最優解結果： KL和JS散度表達式： GAN表達式： 增加一項，表示生成網絡G的損失函數：

>>阅读原文<<