如何使用scrapyd部署爬蟲項目

功能:相當於一個服務器,用於將自己本地的爬蟲代碼,打包上傳到服務器上,讓這個爬蟲在服務器上運行,可以實現對爬蟲的遠程管理。(遠程啓動爬蟲、關閉爬蟲、查看爬蟲的一些日誌) 1.scrapyd的安裝:在cmd中,輸入指令 :pip install scrapyd 2.安裝服務與客戶端 a>scrapyd提供了一個客戶端工具,就是scrapyd-client,使用這個工具對scrapyd這個服務進行操作
相關文章
相關標籤/搜索