大數據—Hadoop的HDFS數據完整性校驗

一、HDFS數據完整性        Hadoop提供兩種校驗         1.校驗和           Hdfs會對寫入的所有數據計算校驗和，並在讀取數據時驗證校驗和。元數據節點負責在驗證收到的數據後，儲存數據及其及其校驗和。在收到客戶端數據或複製其他datanode的數據時執行。正在寫數據的客戶端將數據及其校驗和發送到一系列數據節點組成的管線，管線的最後一個數據節點負責驗證校驗和。客戶端

>>阅读原文<<