Spark任務處理流程

最近學習了spark，現根據任務提交分析處理過程總結一下相關的主要模塊和任務提交處理流程。html 一些重要術語 client，用戶編寫的spark任務提交程序 master，spark主節點，負責任務和資源調度、節點管理，相似於Yarn的ResourceManager worker，spark工做節點，能夠在上面啓動Executor進程，相似於Yarn的NodeManager driver，wo

>>阅读原文<<