決策樹(二)

  也可以說,信息量度量的是一個具體事件發生了所帶來的信息,而熵則是在結果出來之前對可能產生的信息量的期望——考慮該隨機變量的所有可能取值,即所有可能發生事件所帶來的信息量的期望。即: 1.2 條件熵(可以理解爲在給定某種條件下弄清這件事所需要的信息量,其中給定某種條件後給決策樹補充了信息量)    關於條件熵的兩篇博客:文章1、文章2、文章3     對於條件熵的具體理解: 我們的條件熵的定義是
相關文章
相關標籤/搜索