【3.7】Hadoop數據壓縮

1. 概述 壓縮概述 壓縮策略和原則 2. MR支持的壓縮編碼 爲了支持多種壓縮/解壓縮算法,Hadoop 引入了編碼/解碼器,如下表 壓縮性能的比較 3.壓縮方式選擇 Gzip壓縮 Bzip2壓縮 Lzo壓縮 Snappy壓縮 4.壓縮位置選擇 壓縮可以在MapReduce作用的任意階段啓用 5.壓縮參數配置 要在Hadoop中啓用壓縮,可以配置如下參數:
相關文章
相關標籤/搜索