scrapyd+scrapydweb部署和監控分佈式爬蟲項目(同一臺機器)

一、安裝部署scrapyd 系統:centos7.6html 安裝命令:python pip3 install scrapyd(由於本地有2.7+和3.+版本python) 安裝成功後新建配置文件:web sudo mkdir /etc/scrapydjson sudo vim /etc/scrapyd/scrapyd.confvim scrapyd.conf 寫入以下內容:(給內容在https:
相關文章
相關標籤/搜索