HIVE-shuffle階段的oom處理方法

工做中碰到的問題，如今記下來之後好找。 1.增長reduce數（set mapreduce.job.reduces=xxx）或者 set hive.exec.reducers.bytes.per.reducer=150000000;默認是1G 2.或調整放在內存裏的最大片斷所佔百分比 （set mapreduce.reduce.shuffle.memory.limit.percent=0.10）。

>>阅读原文<<