Python使用adbapi實現MySQL數據庫的異步存儲

  以前一直在寫有關scrapy爬蟲的事情，今天咱們看看使用scrapy如何把爬到的數據放在MySQL數據庫中保存。css 有關python操做MySQL數據庫的內容，網上已經有不少內容能夠參考了，但都是在同步的操做MySQL數據庫。在數據量不大的狀況下，這種方法當然能夠，可是一旦數據量增加後，MySQL就會出現崩潰的狀況，由於網上爬蟲的速度要遠遠高過往數據庫中插入數據的速度。爲了不這種狀況發生，

>>阅读原文<<