datax--分庫分表mysql同步數據到hive中

1、背景及問題 背景歸納 分表100張 數據量8.6億 須要使用datax從mysql同步至hdfs（hive） 以前是100個datax任務寫入ods層的一張合併表，構建二級分區，一級是加載日期，二級是分表的編號 以前是每日全量 ${}爲傳參 修改前datax代碼簡化參考 { "job": { "setting": {

>>阅读原文<<