MapReduce介紹

MapReduce分爲兩個部分一個是map,一個是reduce 對應的java類分別是mapper和reducer。 MapReduce的特性是對集羣內的數據進行並行計算。 MapReduce的初識,例如黃匡內的是氣象數據。經過第二步初始映射key是行號,value就是數據庫,在經過第三步帶有實際業務的映射輸出把有用的數據抽出,key是年份,value是溫度。然後經過shuttle(洗牌),按照年
相關文章
相關標籤/搜索