hive 相關異常

內存不夠:java

set mapreduce.map.memory.mb=4096;
set mapreduce.map.java.opts=-Xmx3280m;大數據

set mapreduce.reduce.memory.mb=4096;
set mapreduce.reduce.java.opts=-Xmx3280m;內存

或者設置每個任務的最大數據處理量:map

set hive.exec.reducers.bytes.per.reducer=500000000;數據

或者設置任務數目:memory

set mapred.reduce.tasks = 15;大數據處理

set mapred.map.tasks = 15;數據處理

相關文章
相關標籤/搜索