機器學習——特徵工程之特徵選擇

一、過濾式選擇 1、過濾式方法先對數據集進行特徵選擇，然後再訓練學習器，特徵選擇過程與後續學習器無關 2、Relief是一種著名的過濾式特徵選擇方法，利用「相關統計量」來度量特徵的重要性，該統計量是一個向量，其每個分量分別對應於一個初始特徵，而特徵子集的重要性則是由子集中每個特徵對應的相關統計量分量之和來決定 3、相關統計量的屬性j分量：      a) 猜中近鄰：當前樣本  的同類樣本中尋找到的

>>阅读原文<<