MR 筆記三

Shuffle機制 map 階段處理的數據如何傳遞給 reduce 階段,是 MapReduce框架中最關鍵的一個流程,這個流程就叫shuffle。 shuffle: 洗牌、發牌——(核心機制:數據分區,排序,分組,combine,合併等過程)  
相關文章
相關標籤/搜索