Spark SQL系列------1. Spark SQL 物理計劃的Shuffle實現

    Spark SQL物理計劃要到Spark-core執行，須要將Spark SQL物理計劃轉化成RDD，而且創建RDD之間的依賴關係。這個過程能夠經過以下圖大概表示：算法 上圖中綠色部分指Spark物理計劃到RDD過程當中數據結構的變遷過程。黃色部分表示變遷過程當中，起加工做用的數據結構。sql 一：從SparkPlan到Exchange數據結構 優化後的Spark SQL物理計劃對數據Di

>>阅读原文<<