爬蟲中異步數據寫入MySQL數據庫方法

爬蟲中異步數據寫入MySQL數據庫方法（adbapi） 數據庫pymysql的commit()和execute()在提交數據時，都是同步提交至數據庫，因爲scrapy框架數據的解析和異步多線程的，因此scrapy的數據解析速度，要遠高於數據的寫入數據庫的速度。若是數據寫入過慢，會形成數據庫寫入的阻塞，影響數據庫寫入的效率。 經過多線程異步的形式對數據進行寫入，能夠提升數據的寫入速度。python

>>阅读原文<<