Spark:java api讀取hdfs目錄下多個文件

需求: 因爲一個大文件,在spark中加載性能比較差。因而把一個大文件拆分爲多個小文件後上傳到hdfs,然而在spark2.2下如何加載某個目錄下多個文件呢?session public class SparkJob { public static void main(String[] args) { String filePath = args[0]; /
相關文章
相關標籤/搜索