SparkRDMA：使用RDMA技術提升Spark的Shuffle性能

目錄 Spark Shuffle 基礎 RDMA 技術 SparkRDMA 安裝使用 關於配置libdisni.so Spark Shuffle 基礎 在 MapReduce 框架中，Shuffle 是連接 Map 和 Reduce 之間的橋樑，Reduce 要讀取到 Map 的輸出必須要經過 Shuffle 這個環節；而 Reduce 和 Map 過程通常不在一臺節點，這意味着 Shuffle

>>阅读原文<<