Hadoop機架感知技術

背景 Hadoop在設計時考慮到數據的安全與高效，數據文件默認在HDFS上存放三份，HDFS的存放策略是第1個複本存放在運行客戶端的本地機架節點上，第2個複本存放在不同機架的一個節點上，第三個複本存放在與第2複本相同機架、不同節點上。這種策略減少了機架間的數據傳輸，提高了寫操作的效率。這樣如果本地數據損壞，節點可以從同一機架內的相鄰節點拿到數據，速度肯定比從跨機架節點上拿數據要快；同時，如果整個機

>>阅读原文<<