spark 輸出結果壓縮(gz)

     若是不想往下看,能夠直接看結果:maxCallRdd.repartition(3).saveAsTextFile(path,GzipCodec.class); 恩,沒錯。就只這麼一行簡單的代碼實現了gz壓縮,可是爲何網上一直沒找到呢,這個我不太清楚, 多是他們沒碰到吧。 java     最近項目的需求,其實很簡單,就是將輸出結果以.gz的格式壓縮,每一個壓縮包的大小不能超過100M,並
相關文章
相關標籤/搜索