RNNoise代碼分析1——神經網絡激活函數

開始分析RNNoise的C代碼細節。 RNNoise用到3種激活函數，分別是tanh(x)、sigmoid(x)和ReLU(x)。 1、tanh用到了查表法，查表法一般使用線性插值方法，此處使用泰勒級數展開。推導過程如下： tanh(x) = (exp(x) − exp(−x))/(exp(x) + exp(−x)) tanh(x)' = 1-(tanh(x))^2 泰勒級數取前三項得f(x) =

>>阅读原文<<