MapReduce中的壓縮

壓縮 Hadoop權威指南5.2 P99 Mapper輸入壓縮 在有大量數據並反覆處理的情況下，應考慮對輸入進行壓縮，然而你無需指定使用的譯碼方式，Hadoop會自動檢測文件的擴展名，如果擴展名能夠匹配，就會調用恰當的譯碼方式對文件進行壓縮和解壓。否則Hadoop不會使用任何譯碼器，拋異常 此階段默認支持的格式有 org.apache.hadoop.io.compress.DefaultCodec

>>阅读原文<<