本身設置mapreduce程序的map個數和reduce個數

設置reduce個數(一個reduce生成一個文件) 一、若是不指定reduce個數,hive會基於一下兩個參數自動計算       (1)hive.exec.reducers.bytes.per.reducer                 這是每一個reduce處理的數據量,默認爲1G=1000000000        (2)hive.exec.reducers.max(每一個任務的最大r
相關文章
相關標籤/搜索