RDD 的創建方式與分區機制

RDD 的創建方式 RDD 的創建方式有四種: 1.使用程序中的集合創建 RDD,RDD 的數據源是程序中的集合,通過 parallelize 或者 makeRDD 將集合轉化爲 RDD; *例 val num = Array(1,2,3,4,5,6) val rdd = sc.parallelize(num) 2.使用本地文件或 HDFS 創建 RDD,RDD 的數據源是本地文件系統或 HDF
相關文章
相關標籤/搜索