yarn下的hdfs和mr性能調優參數一覽表

mr核心的幾個參數:java conf/mapred-site.xml:node mapreduce.task.io.sort.mb併發 任務內部排序緩衝區大小默認100mjvm mapreduce.map.sort.spill.percent性能 Map階段溢寫文件的閾值(排序緩衝區大小的百分比)默認0.8線程 mapreduce.reduce.shuffle.parallelcopiesxml
相關文章
相關標籤/搜索