mapreduce項目調優

1、調優的目的 充分的利用機器的性能,更快的完成mr程序的計算任務。甚至是在有限的機器條件下,可以支持運行足夠多的mr程序。 2、調優的整體概述 從mr程序的內部運行機制,咱們能夠了解到一個mr程序由mapper和reducer兩個階段組成,其中mapper階段包括數據的讀取、map處理以及寫出操做(排序和合並/sort&merge),而reducer階段包含mapper輸出數據的獲取、數據合併(
相關文章
相關標籤/搜索