spark文件讀寫

1 普通textFile讀寫java 讀取hdfs上的文本文件apache scala>val rdd1=sc.textFile("hdfs://hadoop1:9000/myone/input/a.txt")json 進行相關處理,按照文件中每行進行處理ide scala> val rdd2=rdd1.flatMap(line=>line.split("\\s+")).map(d=>(d,1)o
相關文章
相關標籤/搜索