sparksubmit的執行流程

sparksubmit提交任務之後的任務運行流程如下: 1、master與worker建立連接   master中有worker的信息  內存 核數 資源 IO 網絡等信息 2、worker每段時候會向master發送心跳報活 3、Driver發送任務,首先會向master申請資源 4、master與worker進行rpc通信,讓worker啓動executor   5、executor啓動後會主
相關文章
相關標籤/搜索