數據交換dump一個隱藏bug

場景: 數據交換平臺,mysql全量數據導出到hive。 原理:查詢mysql的最大,最小id. 然後根據併發,fetch大小,分配給不同線程的mysql連接執行,查詢的數據通過hive的hcatelog api接口導入到hive表。 描述: 1:mysql表全量數據導入到hive.  發現進度到100%了,但是系統一直無法執行成功。 2:使用jstack 查看進程,發現mysql一直在resul
相關文章
相關標籤/搜索