[MapReduce]壓縮

壓縮基本原則:
  1. 運算密集型的job 少用壓縮
  2. IO密集型job,多用壓縮
支持的壓縮編碼

微信截圖_20200225170504.png

各壓縮使用場景
GZIP壓縮

微信截圖_20200225173436.png

BZip2壓縮

微信截圖_20200225174223.png

LZO壓縮

微信截圖_20200225174436.png

Snappy壓縮

微信截圖_20200225174638.png

MapReduce各階段 壓縮方式的選擇

微信截圖_20200225175126.png

相關文章
相關標籤/搜索