spark core源碼閱讀-RDD詳細介紹(四)

以前對RDD有一個大致概念瞭解,這一節咱們須要深刻了解它,瞭解在源碼中究竟是什麼, 怎麼產生的,給個rdd之間怎麼依賴的,最後又怎麼生成spark jobjavascript 咱們仍是先從一個例子下手:java val sc = new SparkContext(sparkConf) val res = sc .textFile(args(0)) .flatMap(line => lin
相關文章
相關標籤/搜索