hadoop discp 不一樣版本間拷貝數據

hadoop   discp 的時候遇到的checksum mismatch問題html

解決方法tcp

網上廣泛解決方法oop

hdfs-site.xmlspa

將dfs.checksum.type屬性設置爲CRC32orm

使用過程當中仍然有報上述錯誤xml


經檢驗  參照 http://blog.sina.com.cn/s/blog_7ed002b30101kk08.htmlhtm

使用  -update   -skipcrccheck 選項便可。blog

hadoop distcp -update -skipcrccheck hftp://host:50070/文件 /路徑ip

相關文章
相關標籤/搜索