hadoop_MR優化:壓縮

壓縮文件的好處  1.減小文件存儲所佔空間  2.加快文件傳輸效率,從而提高系統的處理速度  3.降低IO讀寫的次數 壓縮文件的壞處  1.使用數據時先對文件解壓,加重CPU負荷,壓縮越狠,解壓時間越長 Snappy<LZ4<LZO<GZIP<BZIP2 //開啓map壓縮******************************************************** config
相關文章
相關標籤/搜索