hadoop distcp hftp hdfs跨集羣拷貝常見問題歸總

  在工作中遇到部門間數據合作，需跨不同版本集羣拷貝數據，從hadoop 2.6.0-cdh5.7.0 拷貝數據到hadoop 2.7.1， 記錄所碰到的問題及解決方案。 distcp基礎用法 比如拷貝A集羣（src集羣）的A1目錄到B集羣（dest集羣）的B1目錄， 1.同版本集羣拷貝（hdfs協議）： 在dest集羣（目標集羣）運行命令： hadoop distcp  hdfs://10.19

>>阅读原文<<