監督學習——決策樹

什麼是決策樹/判定樹（decision tree） 決策樹/判定樹是一個類似流程圖的樹結構：其中，每個內部節點表示在一個屬性上的測試，每個分支代表一個屬性輸出，而每個樹葉節點代表類或類分佈。樹的頂層是根節點。 信息熵（entropy） 信息很抽象，我們該如何度量呢？ 一條信息的信息量大小和它的不確定性有直接關係。 變量的不確定性越大，熵也越大。 決策樹歸納算法（ID3） 選擇屬性判斷結點

>>阅读原文<<