SPARK中shuffle的機制和原理分析

目錄 概述 一 HashShuffle機制 1.1 HashShuffle概述 1.2 沒有優化之前的HashShuffle機制​ 1.3 優化後的HashShuffle 二 Sort-Based Shuffle 2.1 Sort-Based Shuffle概述 2.2 Sorted-Based Shuffle介紹 概述 Shuffle就是對數據進行重組，由於分佈式計算的特性和要求，在實現細節上更

>>阅读原文<<