Hadoop()-理解Map-Reduce

map-reduce背後的思想很簡單,就是把一些數據通過map來歸類,通過reducer來把同一類的數據進行處理。 map-reduce之所以有效是基於兩個哲學, (1)大而化小 和 (2) 異而化同。 這兩個應對了大數據中的volume(量)和variety(類)挑戰。 wordCount要求:計算文件中出現每個單詞的頻數
相關文章
相關標籤/搜索