整理scrapy可視化管理工具spiderkeeper

spiderkeeper是一款開源的spider管理工具，可以方便的進行爬蟲的啓動，暫停，定時，同時可以查看分佈式情況下所有爬蟲日誌，查看爬蟲執行情況等功能。 #安裝 安裝環境 centos  /  ubuntu16.04（我的是centos7）  python3.5 pip3 install scrapy pip3 install scrapyd pip3 install scrapyd-cli

>>阅读原文<<