主成分分析（PCA）與線性判別分析（LDA）的區別與聯繫

LDA用於降維，和PCA有很多相同，也有很多不同的地方，因此值得好好的比較一下兩者的降維異同點。 相同點： 1）兩者均可以對數據進行降維。 2）兩者在降維時均使用了矩陣特徵分解的思想。 3）兩者都假設數據符合高斯分佈。 不同點： 1）LDA是有監督的降維方法，而PCA是無監督的降維方法 2）LDA降維最多降到類別數k-1的維數，而PCA沒有這個限制。 3）LDA除了可以用於降維，還可以用於分類。

>>阅读原文<<