Spark2.x學習筆記：十一、RDD依賴關係與stage劃分

十一、 RDD依賴關係與stage劃分 Spark中RDD的高效與DAG圖有着莫大的關係，在DAG調度中須要對計算過程劃分stage，而劃分依據就是RDD之間的依賴關係。web 11.1 窄依賴與寬依賴 針對不一樣的轉換函數，RDD之間的依賴關係分類窄依賴（narrow dependency）和寬依賴（wide dependency, 也稱 shuffle dependency）。編程 （1）窄依

>>阅读原文<<