直觀解讀KL散度的數學概念

機器學習是當前最重要的技術發展方向之一。 基本概念 分佈： 分佈可能指代不同的東西，比如數據分佈或概率分佈。我們這裏所涉及的是概率分佈，假設你在一張紙上畫了兩個軸（X,Y），我們可以將一個分佈想成是落在這兩根軸之間的一條線。其中，X表示你有興趣獲取概率的不同值。Y表示觀察X軸上的值所得到的概率。即y=p（x）。下圖即使某分佈的可視化。 這是一個連續分佈。比如，我們可以將X軸看成是人的身高，Y軸是找

>>阅读原文<<