Spark 3.0 AQE Adaptive Query Execution詳解

在Spark 3.0中，AQE框架具有以下三個功能： Dynamically coalescing shuffle partitions （動態整合shuffle partitions 數量） Dynamically switching join strategies  （ 動態切換連接策略 ） Dynamically optimizing skew joins  （ 動態優化傾斜連接 ） 以下各

>>阅读原文<<