Hive 優化篇乾貨 整理

Hive 優化 ？ Hive SQL本質就是MapReduce 1.任務層：在小數據量的時候我們可以開啓本地模式(單臺機器可以處理所有的任務。對於小數據集可以明顯縮短)、 因爲跑MR的話啓動時間會花費很長一段時間 (2)hive.fetch.task.conversion設置成 more，然後執行查詢語句，如下查詢方式都不會執行 mapreduce 程序。 2.存儲和壓縮層：存儲格式和數據壓縮（O

>>阅读原文<<