Spark Worker源碼追蹤和分析

Worker原理 driver 原理 每一個Driver都會被封裝成DriverRunner。在DriverRunner中,主要做的事情,就是在worker上面創建driver的工作目錄,然後拉取jar包到本地將這些信息封裝好了後使用buildProcess打包發送給driver進行運行,這裏只需要知道driver是被java進程調度即可。 源碼 1、啓動driver,主要是將配置信息封裝到dri
相關文章
相關標籤/搜索