spark Job執行流程

spark Job執行流程 從hdfs/local/集合中讀取數據,放到worker的內存中。 然後,work節點中的exector的task,再針對hdfs對應的linesRDD,依此進行我們的flatmap/map/reduceByKey等操作。
相關文章
相關標籤/搜索