Shuffle和排序

http://www.cnblogs.com/yangyquin/p/5021234.html   MapReduce確保每個reducer的輸入都按鍵排序。系統執行排序的過程——將map輸出作爲輸入傳給reducer——稱爲shuffle。shuffle屬於不斷被優化和改進的代碼庫的一部分,從許多方面來看,shuffle是MapReduce的「心臟」,是奇蹟發生的地方。事實上,shuffle這個
相關文章
相關標籤/搜索