交叉熵

文章轉自：http://blog.csdn.net/rtygbwwwerr/article/details/50778098 交叉熵（Cross-Entropy） 交叉熵是一個在ML領域常常會被提到的名詞。在這篇文章裏將對這個概念進行詳細的分析。php 1.什麼是信息量？ 假設X是一個離散型隨機變量，其取值集合爲X，機率分佈函數爲p(x)=Pr(X=x),x∈X，咱們定義事件X=x0的信息量爲：

>>阅读原文<<