hadoop discp 的時候遇到的checksum mismatch問題html
解決方法tcp
網上廣泛解決方法oop
在hdfs-site.xmlspa
將dfs.checksum.type屬性設置爲CRC32orm
使用過程當中仍然有報上述錯誤xml
經檢驗 參照 http://blog.sina.com.cn/s/blog_7ed002b30101kk08.htmlhtm
使用 -update -skipcrccheck 選項便可。blog
hadoop distcp -update -skipcrccheck hftp://host:50070/文件 /路徑ip