Spark RDD collect與collectPartitions

確切的應該說是RDD collect^_^ 1.collect的作用         Spark內有collect方法,是Action操作裏邊的一個算子,這個方法可以將RDD類型的數據轉化爲數組,你可以隨時val arr = data.collect(),將RDD類型數據轉化爲數組來存放並參與後續運算。 2.已知的弊端     首先,從時間上來講,前邊已經說過了,collect是Action裏邊的
相關文章
相關標籤/搜索