機器學習：決策樹之信息論基礎（信息熵）

決策樹之信息論基礎 決策樹思想的來源非常樸素，程序設計中的條件分支結構就是if-then結構，最早的決策樹就是利用這類結構分割數據的一種分類學習方法 理解：決策樹 例子：銀行貸款數據 這裏給了一個例子我們怎麼去判斷有個用戶是否可以給貸款。 我們可以這樣劃分： 但是決策樹的實際劃分是： 我們有一個最主要的劃分點。那就是房產。 再看一個例子：瞭解信息的度量和作用 假設這裏有32支球隊，我們沒有任何信息

>>阅读原文<<