hadoop集羣調優及MR調優

1、操做系統調優node 一、提升網絡鏈接上限。以增長網絡帶寬的利用率，即修改內核net.core.somaxcon參數緩存 二、關閉swap交換分區。以避免內存不足時，數據會溢寫到磁盤，讀取時再從磁盤讀取，增長數據讀取時間網絡 三、調整預讀緩存區的大小。將數據預讀，減小磁盤IO時間框架 2、HDFS調優分佈式 一、配置文件一：core-site.xmloop 1>hadoop.tmp.dir：手

>>阅读原文<<