Spark描述DAG的2種Task類型解析

Spark有2個類型的Task: ShuffleMapTask和ResultTask;函數   設想有:  Stage1  ----shuffle-------->  Stage2 -----shuffle------>  Stage3oop   Stage3就是一個ResultTask, 由於是最終的action的執行;spa Stage2既是1個shuffle的數據讀取者, 又是1個shuff
相關文章
相關標籤/搜索