MR知識點彙總

  Map端的調優屬性 io.sort.mb int 100 排序Map輸出是所使用內存緩衝區的大小,以MB爲單位 io.sort.record.percent float 0.05 用作存儲Map輸出記錄邊界的io.sort.mb的比例,剩餘的空間存儲Map輸出記錄本身 io.sort.spill.percent float 0.8 Map輸出內存緩衝和用來開始磁盤溢出寫過程的記錄邊界索引,是兩
相關文章
相關標籤/搜索