Scrapy爬蟲同步、異步保存MySQL

一、保存數據庫有兩種方法： 同步操做：數據量少的時候採用 異步操做：數據量大時採用，scrapy爬取的速度大於數據庫插入的速度，當數據量大時就會出現堵塞，就須要採用異步保存。 這裏多大的數據量纔可定義爲大？？html 二、須知mysql知識點 數據庫與表的建立，基本操做；      參考https://blog.csdn.net/shalyniu/article/details/79247423

>>阅读原文<<