scrapyd 部署爬蟲項目

scrapyd部署爬蟲的優勢: 1、方便監控爬蟲的實時運行狀態,也可以通過接口調用開發自己的監控爬蟲的頁面 2、方便統一管理,可以同時啓動或關閉多個爬蟲 3、擁有版本控制,如果爬蟲出現了不可逆的錯誤,可以通過接口恢復到之前的任意版本 實現功能,爬蟲項目在服務器端運行,實現爬蟲遠程管理,不佔用本機的運行空間。 =============================================
相關文章
相關標籤/搜索