初始Hadoop(3)

一 Hadoop的I/O 1 數據完整性 檢測損壞數據的常用方法是在第一次進入系統時計算數據的校驗和,如果新生成的校驗和不完全匹配原始的校驗和,那麼數據就被認爲是被損壞了。 每個512字節都有一個單獨的校驗和。 數據節點負責在存儲數據及其校驗和前驗證它們收到的數據。客戶端寫入數據並且將它發送到一個數據節點的管線中,在管線上的最有一個數據節點驗證校驗和。如果此節點檢測到錯誤,客戶端便會收到一個che
相關文章
相關標籤/搜索