3_決策樹算法梳理

信息論基礎（熵 聯合熵 條件熵 信息增益 基尼不純度） • 定義：分類決策樹模型是一種描述對實例進行分類的樹形結構(可以是二叉樹或非二叉樹). 其中內部節點（非葉子節點）表示一個特徵或屬性，葉子節點表示一個類.【或者說，內部節點是每個非葉節點表示一個特徵屬性上的測試，每個分支代表這個特徵屬性在某個值域上的輸出，而每個葉節點存放一個類別】 ！決策過程！ 使用決策樹進行決策的過程就是從根節點開始，測試

>>阅读原文<<