spark學習-69-源代碼:Endpoint模型介紹(1)

Spark作爲分佈式計算框架,多個節點的設計與相互通信模式是其重要的組成部分 一、組件概覽 對源碼分析,對於設計思路理解如下: RpcEndpoint:RPC端點 ,Spark針對於每個節點(Client/Master/Worker)都稱之一個Rpc端點 ,且都實現RpcEndpoint接口,內部根據不同端點的需求,設計不同的消息和不同的業務處理,如果需要發送(詢問)則調用Dispatcher R
相關文章
相關標籤/搜索