hdfs校驗和

hdfs完整性:用戶希望儲存和處理數據的時候,不會有任何損失或者損壞。所以提供了兩種校驗: 1.校驗和(常用循環冗餘校驗CRC-32)。 2.運行後臺進程來檢測數據塊。 校驗和: a.寫入數據節點驗證 b.讀取數據節點驗證 c.恢復數據 d.Localfilesystem類 e.ChecksumfileSystem類 寫入數據節點驗證:   Hdfs會對寫入的所有數據計算校驗和,並在讀取數據時驗證
相關文章
相關標籤/搜索