shuffle過程當中sort總結

寫在前面的話: 新學期開學想從新複習一下Hadoop的知識,不斷更新本身的知識庫,在今天晚上閱讀的過程當中發現,有人已經總結了Mapreduce在shuffle過程當中sort的實施。我之前歷來都沒有深刻探究過sort過程應用的算法,以及sort的次數。今天我將其總結一下: 排序貫穿於Map任務和Reduce任務,是MapReduce很是重要的一環,排序操做屬於MapReduce計算框架的默認行爲
相關文章
相關標籤/搜索