Spark Core入門2【RDD的實質與RDD編程API】

1、對RDD操做的本質 RDD的本質是一個函數,而RDD的變換不過是函數的嵌套.RDD有兩類:php 輸入的RDD: 典型如KafkaRDD、JDBCRDD 轉換的RDD: 如MapPartitionsRDD RDD的處理流程:html 以以下代碼爲例:java sc.textFile("abc.log").map().saveAsTextFile("") 1. textFile 會構建出一個Ne

>>阅读原文<<