Spark32個經常使用算子總結

官方文檔上列舉共有32種常見算子，包括Transformation的20種操做和Action的12種操做。shell （注：如下截圖爲windows下運行結果）windows Transformation：數組 1.map函數 map的輸入變換函數應用於RDD中全部元素，而mapPartitions應用於全部分區。區別於mapPartitions主要在於調用粒度不一樣。如parallelize（1

>>阅读原文<<