HADOOP中mapreduce開啓壓縮功能

                       最近給熱雲公司共享數據，咱們把原始數據給到他們，讓他們作計算。天天同步一次，數據量壓縮後10幾個G，數據來自hive的mapreduce查詢。經過insert overwrite local directory select語句將數據寫入本地的NFS，而後對數據壓縮，並在NFS的服務端機器提供文件下載功能。因爲壓縮前數據量太大，大概有90G左右。所以在

>>阅读原文<<