平時在一些數據處理中,常常會把原始數據取對數後進一步處理。之因此這樣作是基於對數函數在其定義域內是單調增函數,取對數後不會改變數據的相對關係,取對數做用主要有:
1. 縮小數據的絕對數值,方便計算。例如,每一個數據項的值都很大,許多這樣的值進行計算可能對超過經常使用數據類型的取值範圍,這時取對數,就把數值縮小了,例如TF-IDF計算時,因爲在大規模語料庫中,不少詞的頻率是很是大的數字。
2. 取對數後,能夠將乘法計算轉換稱加法計算。
3. 某些狀況下,在數據的整個值域中的在不一樣區間的差別帶來的影響不一樣。例如,中文分詞的mmseg算法,計算語素自由度時候就取了對數,這是由於,若是某兩個字的頻率分別都是500,頻率和爲1000,另外兩個字的頻率分別爲200和800,若是單純比較頻率和都是相等的,可是取對數後,log500=2.69897, log200=2.30103, log800=2.90308 這時候前者爲2log500=5.39794, 後者爲log200+log800=5.20411,這時前者的和更大,取前者。由於前面兩個詞頻率都是500,可見都比較常見。後面有個詞頻是200,說明不太常見,因此選擇前者。
從log函數的圖像能夠看到,自變量x的值越小,函數值y的變化越快,仍是前面的例子,一樣是相差了300,但log500-log200>log800-log500,由於前面一對的比後面一對更小。
也就是說,對數值小的部分差別的敏感程度比數值大的部分的差別敏感程度更高。這也是符合生活常識的,例如對於價格,買個家電,若是價格相差幾百元可以很大程度影響你決策,可是你買汽車時相差幾百元你會忽略不計了。
4. 取對數以後不會改變數據的性質和相關關係,但壓縮了變量的尺度,例如800/200=4, 但log800/log200=1.2616,數據更加平穩,也消弱了模型的共線性、異方差性等。
5. 所獲得的數據易消除異方差問題。
6. 在經濟學中,常取天然對數再作迴歸,這時迴歸方程爲 lnY=a lnX+b ,兩邊同時對X求導,1/Y*(DY/DX)=a*1/X, b=(DY/DX)*(X/Y)=(DY*X)/(DX*Y)=(DY/Y)/(DX/X) 這正好是彈性的定義。
固然,若是數據集中有負數固然就不能取對數了。實踐中,取對數的通常是水平量,而不是比例數據,例如變化率等。算法