Spark源碼分析之Rpc框架

文章目錄 概述 基本概念 組件原理 Message消息 通信架構 SparkEnv的初始化 RpcEnv Rpc服務端的啓動流程 Rpc服務端處理請求流程 Rpc客戶端發送請求流程 Rpc請求回調處理流程 參考 概述 在Spark中很多地方都涉及網絡通信，比如 Spark各個組件間的消息互通、用戶文件與Jar包的上傳、節點間的Shuffle過程、Block數據的複製與備份等。Spark1.6之前，

>>阅读原文<<