Hadoop集羣datanode磁盤不均衡的解決方案

一、引言: Hadoop的HDFS集羣非常容易出現機器與機器之間磁盤利用率不平衡的情況,比如集羣中添加新的數據節點,節點與節點之間磁盤大小不一樣等等。當hdfs出現不平衡狀況的時候,將引發很多問題,比如MR程序無法很好地利用本地計算的優勢,機器之間無法達到更好的網絡帶寬使用率,機器磁盤無法利用等等。 二、問題: 因業務需要搭建一個新hadoop集羣,並將老的hadoop集羣中的數據遷移至新的had
相關文章
相關標籤/搜索