Spark 中 map 與 flatMap 的比較

通過一個實驗來看Spark 中 map 與 flatMap 的區別。   步驟一:將測試數據放到hdfs上面 hadoopdfs -put data1/test1.txt /tmp/test1.txt 該測試數據有兩行文本:   步驟二:在Spark中創建一個RDD來讀取hdfs文件/tmp/test1.txt   步驟三:查看map函數的返回值 得到map函數返回的RDD:  查看map函數的返
相關文章
相關標籤/搜索