Spark調優----數據本地化

Spark數據本地化-->如何達到性能調優的目的 1.Spark數據的本地化:移動計算,而不是移動數據 2.Spark中的數據本地化級別: TaskSetManager 的 Locality Levels 分爲以下五個級別: PROCESS_LOCAL  NODE_LOCAL NO_PREF    RACK_LOCAL ANY PROCESS_LOCAL   進程本地化:task要計算的數據在同一
相關文章
相關標籤/搜索