PCA、LDA、CCA 和 PLS 有什麼關係?它們看起來都是“光譜的”和線性代數的,並且非常容易理解(比如圍繞它們建立了 50 多年的理論)。它們用於非常不同的事情(PCA 用於降維,LDA 用於分類,PLS 用於回歸)但它們仍然感覺非常密切相關。
Tijl De Bie 寫了一個有趣的章節“模式識別中的特徵問題”,它從原始/雙重角度討論了這些問題。最後的三個表從優化的角度總結得非常好:
引用自:https://stats.stackexchange.com/questions/23353