006.面試：HIVE 2個大表join的傾斜問題

爲什麼80%的碼農都做不了架構師？>>>    1.hive 2個大文件傾斜join如何解決？ 設置maxSize和preRedecer的大小，能保證數據的均勻分配。  注意： 設置Reduce和perReducer就行，性能還不錯 MAP階段優化 •mapred.map.tasks 無效 •num_map_tasks切割大小影響參數 –mapred.max.split.size 默認： 256

>>阅读原文<<