java 業務層和多線程遇到的坑

需求 把某個網站上或者別的數據庫裏導出的文件全部導入到自己的數據庫裏 數據文件和格式已經給出了，不需要關心從哪來，只需要讀取到數據庫裏就行，不能出錯，不能時間太長。   大致實現 個人思路是先對數據進行分片，按照一定規則（數據數量）進行切分，然後多個線程同時讀取往數據庫裏寫，同時彼此控制事務。   遇到的問題 數據量少100萬以內時沒有遇到問題，數據量大的時候分片量大線程數也大。 線程達到了8個，

>>阅读原文<<