Hive高階之數據壓縮

Hive的壓縮依賴於MapReduce的支持,也就是安裝的hadoop組件,如果不支持的話就需要自行編譯。常用的壓縮方法是snappy壓縮,而這種壓縮方法依賴於操作系統的snappy組件,所以hadoop組件一般不默認編譯,如果要支持的話就需要重新進行編譯。好在CDH版本已經支持壓縮方法了,不需要重新進行編譯。我們可以通過hadoop命令查看當前的hadoop集羣是否支持snappy壓縮。 [[e
相關文章
相關標籤/搜索