TeraSort實驗--測試Map和Reduce Task數量對Hadoop性能的影響

一、           實驗環境 1個master節點, 16個slave節點: CPU:8GHZ , 內存: 2G 網絡:局域網 二、           實驗描述    通過Hadoop自帶的Terasort排序程序,測試不同的map task和reduce task數量,對Hadoop性能的影響。    實驗數據由程序中的teragen程序生成,數據量爲1GB和10GB。    通過設置m
相關文章
相關標籤/搜索