spark學習(五):shuffle以及內存管理機制

目錄 1. shuffle詳解 1.1 那麼到底什麼時shufffle? reduceByKey的含義? 問題: 如何聚合? 1.2 Shuffle分爲shuffle和sortShuffle 1.2.1 shuffle普通機制 1.2.2 shuffle合併機制 1.2.3 SortShuffle普通運行機制 1.3 shuffle文件尋址 1.4 shuffle調優 2. spark的內存管理機
相關文章
相關標籤/搜索