foreachRDD、foreach和foreachPartition的區別

首先foreachRDD 是sparkStreaming的算子, 另外兩個是sparkCore的算子。 一、首先說一下foreach和foreachPartition的區別,類似於map和mapPartition的區別。 (一)map和mapPartition的區別 map是對RDD的每一個元素進行操作,mapPartition是對每個partition的迭代器進行操作。 MapPartition
相關文章
相關標籤/搜索