Spark Shuffle相關總結

Shuffle產生Stage 這裏以shuffle爲界限劃分兩個stage stage依據shuffle劃分,reduce算子產生shuffle 常見shuffle算子 distinct groupByKey reduceByKey aggregateByKey join cogroup repartition
相關文章
相關標籤/搜索