揭祕Spark應用性能調優

引言：在多臺機器上分佈數據以及處理數據是Spark的核心能力，即咱們所說的大規模的數據集處理。爲了充分利用Spark特性，應該考慮一些調優技術。本文每一小節都是關於調優技術的，並給出瞭如何實現調優的必要步驟。 本文選自《Spark GraphX實戰》。算法 1 用緩存和持久化來加速 Spark 　　咱們知道Spark 能夠經過 RDD 實現計算鏈的原理 ：轉換函數包含在 RDD 鏈中，但僅在調用

>>阅读原文<<