SparkShuffle文件尋址以及Executor的內存管理

SparkShuffle文件尋址 在說文件尋址的時候先介紹下面幾個對象 MapOutPutTracker:管理磁盤文件的對象 , MapOutPutTrackerMaster MapOutPutTrackerWorker BlockManager:塊管理 BlockManagerMaster: DiskStore:管理磁盤文件 MemoryStore:管理內存數據 BlockTransferSer
相關文章
相關標籤/搜索