python scrapy項目下spiders內多個爬蟲同時運行

  通常建立了scrapy文件夾後，可能須要寫多個爬蟲，若是想讓它們同時運行而不是順次運行的話，得怎麼作？html   a、在spiders目錄的同級目錄下建立一個commands目錄，並在該目錄中建立一個crawlall.py，將scrapy源代碼裏的commands文件夾裏的crawl.py源碼複製過來，只修改run()方法便可！python   import os from scrapy.c

>>阅读原文<<