Spark BlockManager的通信及內存佔用分析(源碼閱讀九)

  之前閱讀也有總結過Block的RPC服務是通過NettyBlockRpcServer提供打開,即下載Block文件的功能。然後在啓動jbo的時候由Driver上的BlockManagerMaster對存在於Executor上的BlockManager統一管理,註冊Executor的BlockManager、更新Executor上Block的最新信息、詢問所需要Block目前所在的位置以及當Ex
相關文章
相關標籤/搜索