窄依賴和寬依賴

目錄： 一.簡介 二.區別 三.stage劃分 一.簡介 Spark中RDD的高效與DAG圖有着莫大的關係，在DAG調度中需要對計算過程劃分stage，而劃分依據就是RDD之間的依賴關係。針對不同的轉換函數，RDD之間的依賴關係分類窄依賴（narrow dependency）和寬依賴（wide dependency, 也稱 shuffle dependency） 二.區別 窄依賴是指父RDD的每個

>>阅读原文<<