HDFS——數據備份與放置策略(轉)

對於分佈式文件系統來說,爲了保證數據的高可用性和系統容錯能力,往往會把同一數據塊在多個節點上進行備份,那麼如何分配這些複製數據的位置,不同的文件系統會有不同的策略。 一、業界分析 在介紹HDFS之前,先簡單瞭解一些其它文件系統的放置策略: 1. Lustre——一致性哈希環 對於不同的數據備份,需要放到不同的節點上面,一種直觀的想法就是利用Hash函數,這樣可以把每個備份id對應到一個哈希值,然後
相關文章
相關標籤/搜索