spark Job執行流程

spark Job執行流程 從hdfs/local/集合中讀取數據,放到worker的內存中。 而後,work節點中的exector的task,再針對hdfs對應的linesRDD,依此進行咱們的flatmap/map/reduceByKey等操做。
相關文章
相關標籤/搜索