Hive的數據壓縮

在實際工作當中,hive當中處理的數據,一般都是需要經過壓縮,前期我們在學習hadoop的時候,已經配置過hadoop的壓縮, 這裏的hive也是一樣,可以使用壓縮來節省我們的額MR的處理的網絡帶寬。   爲了支持多種壓縮/解壓縮算法,Hadoop引入編碼/解碼器, 壓縮配置參數: 要在Hadoop中啓用壓縮,可以配置如下參數(mapred-site.xml文件中) 開啓Map輸出階段壓縮: 開啓
相關文章
相關標籤/搜索