Spark RDD/DataFrame map保存數據的兩種方式

使用Spark RDD或DataFrame，有時須要在foreachPartition或foreachWith裏面保存數據到本地或HDFS。php 直接保存數據 固然若是不須要在map裏面保存數據，那麼針對RDD能夠有以下方式web val rdd = // target rdd rdd.saveAsHadoopFile // add some parameters 針對DataFrame能夠有以

>>阅读原文<<