Spark Broadcast之TorrentBroadcast

概述 Spark Broadcast概述中介紹了四種實現Broadcast的思路,這篇關注Spark中具體的實現TorrentBroadcast,其是Spark 2.0及以後唯一的實現,其他實現都被刪除了。 設計 TorrentBroadcast的實現和Spark Broadcast概述中介紹的SplitStream Broadcast (SSB) 基本一致,如下 結構 如上圖,當Spark程序使
相關文章
相關標籤/搜索