大數據調整集羣當中的磁盤佔用（HDFS）和存的數據的副本數的調整

最近剛搭建的Hadoop集羣（CM），發現在通過sqoop導入數據使整個集羣當中的磁盤都快佔滿了。這個時候考慮到需要對集羣當中數據的副本數進行修改（由原來的3個副本修改爲現在的1個副本） dfs.replication 將這個參數的值由3變爲1 然後我們在對之前到如到HDFS上面的文件進行重新設置副本數。命令如下： hadoop fs -setrep -R 1 / 將根目錄下的文件的副本數設置

>>阅读原文<<