Hadoop I/O

HDFS中的數據完整性 HDFSZ在寫入數據的時候會計算數據的校驗和,針對每一個由dfs.bytes.per.checksum指定字節的數據計算校驗和,默認爲512個字節 當客戶端讀取數據的時候,會對數據的校驗和進行檢查,若是發現數據出現損壞,則會執行如下步驟:java 1.向Namenode報告其正在讀取的數據塊和所在的Datanode,以後會拋出ChecksumException異常 2.Na
相關文章
相關標籤/搜索