MapReduce優化

對Hadoop,MapReduce的優化主要在四個方面 CPU 因爲mapper和reducer數量依賴於每項任務CPU利用率。因此可在mapred-site.xml里根據每臺機器設置map和reduce數量。經過設置mapred.tasktracker.map.tasks.maximum定義tasktracker同時運行map最大數,mapred.tasktracker.reduce.tasks
相關文章
相關標籤/搜索