機器學習算法中的幾個疑難雜症點(8)----ID3算法的缺陷

本文主要來討論一下決策樹中ID3算法的缺陷,以及爲什麼傾向於特徵選擇項較多的特徵. 文章目錄 一、ID3 算法的缺點: 1、考慮不全面 2、原理缺陷 二、ID3 算法爲什麼要選擇特徵多的屬性: 參考文檔 一、ID3 算法的缺點: 1、考慮不全面 (1)沒有考慮連續特徵.只對於離散型特徵進行信息增益的比較,極大的限制了ID3的用途. (2)沒有考慮到缺失值的情況. (3)沒有考慮過擬合問題.因爲決策

>>阅读原文<<