hive的優化、調優

  總之: 1、使用本地模式(設置爲local模式) 2、提高並行度(SQL語句) 3、查詢的時候,用where+分區(加上分區限制) 4、排序的時候,使用sort+limit限制輸出 5、避免使用笛卡爾積,用join  on(在where中加有效的鏈接條件) 6、大表小表聯合的時候,將小表寫在前 7、儘量在map端做預聚合 8、設置限制map和reduce的數量 
相關文章
相關標籤/搜索