Hadoop學習回顧之MapReduce

MapReduce是批處理的計算框架,分治思想非常樸素,但是實現確實要注意很多細節,同時編程框架個人覺得WordCount部分與storm有相似之處,可以類比學習。 MapReduce過程 一個MapReduce作業經過了input、map、combine、reduce、output五個階段,其中combine不一定發生。 如下圖,在MRv1的架構中,MR job作業,是用戶提交的最小單位,Map
相關文章
相關標籤/搜索