spark學習-BlockManager原理

BlockManager原理：網絡 1.Driver上有BlockManagerMaster，負責對各個節點上的BlockManager內部管理的元數據進行維護。內存 2.每一個節點的BlockManager有幾個關鍵組件，DiskStore負責對磁盤上的數據進行讀寫，MemoryStore負責對內存中的數據進行讀寫，ConnectionManager負責創建BlockManager到遠程其餘節點

>>阅读原文<<