Hive 壓縮

Map輸出壓縮 開啓map輸出階段壓縮可以減少job中map和Reduce task間數據傳輸量。 示例： 開啓hive中間傳輸數據壓縮功能 hive (default)>set hive.exec.compress.intermediate=true; 開啓mapreduce中map輸出壓縮功能 hive (default)>set mapreduce.map.output.compress=t

>>阅读原文<<