Hive的優化

一. 總體架構的優化 hive計算引擎不單單支持MapReduce,而且還支持Tez, Spark等.根據不一樣的計算引擎又可使用不一樣的資源調度和存儲系統。web 總體架構優化點: 1.根據不一樣業務需求進行日期分區,並執行動態分區. 相關參數設置: 0.14中默認hive.exec.dynamic.partition=true算法 2.爲了減小磁盤存儲空間以及I/O次數.對數據進行壓縮 相關參
相關文章
相關標籤/搜索