spark 啓動消息通信基本過程源碼閱讀(一)

spark 啓動消息通信基本過程 spark啓動過程主要是進程maste和worker之間的通信: 1、worker節點向master節點發送註冊消息 2、註冊成功後,返回註冊成功消息或者失敗消息。 3、worker定時發送心跳給master。 具體流程圖如下所示:   1、 a)、當master啓動後,隨之啓動各worker,worker啓動時會創建通信環境RpcEnv和終端點Endpoint,
相關文章
相關標籤/搜索