Hadoop I/O

HDFS中的數據完整性 HDFSZ在寫入數據的時候會計算數據的校驗和，針對每一個由dfs.bytes.per.checksum指定字節的數據計算校驗和，默認爲512個字節 當客戶端讀取數據的時候，會對數據的校驗和進行檢查，若是發現數據出現損壞，則會執行如下步驟：java 1.向Namenode報告其正在讀取的數據塊和所在的Datanode，以後會拋出ChecksumException異常 2.Na

>>阅读原文<<