Hadoop 之 HDFS 的數據完整性

Hadoop 用戶確定都不但願系統在存儲和處理數據時不會丟失或者損壞任何數據。接下來,咱們來考究一下 HDFS 在爲了保證數據完整性,所作的工做。node 總的來講,HDFS 會對寫入的數據計算校驗和,並在讀取數據時驗證校驗和。web datanode 負責收到數據後存儲該數據及其校驗和。datanode 的數據來源可分爲兩種,其一爲是從客戶端收到的數據,其二爲從其餘 datanode 複製來的數
相關文章
相關標籤/搜索