Scrapyd項目部署

一、簡介 scrapyd是運行scrapy爬蟲的服務程序，它支持以http命令方式發佈、刪除、啓動、停止爬蟲程序。而且scrapyd可以同時管理多個爬蟲，每個爬蟲還可以有多個版本。 特點： 1、可以避免爬蟲源碼被看到。 2、有版本控制。 3、可以遠程啓動、停止、刪除 二、安裝 pip install scrapyd 有個必備的組件庫： scrapy 通過pip安裝 1.5.0 enum-compa

>>阅读原文<<