西瓜書EM算法的導出

1 爲什麼需要EM算法 概率模型有時既含有觀測變量，又含有隱變量或者潛在變量。如果概率模型的變量都是觀測變量，那麼給定數據，可以直接用極大似然估計法，或者貝葉斯估計法估計模型參數。但是，當參數含有隱變量時，就不能簡單地使用這些估計方法。EM算法就是含有隱變量的概率模型參數的極大似然估計法。 2 EM算法的過程 書中將EM算法總結爲估計參數隱變量的方法，它是一種迭代式算法： 若參數Θ已知，則根據訓練

>>阅读原文<<