如何通過 Scrapyd + ScrapydWeb 簡單高效地部署和監控分佈式爬蟲項目

來自 Scrapy 官方賬號的推薦 需求分析 初級用戶： 只有一臺開發主機 能夠通過 Scrapyd-client 打包和部署 Scrapy 爬蟲項目，以及通過 Scrapyd JSON API 來控制爬蟲，感覺命令行操作太麻煩，希望能夠通過瀏覽器直接部署和運行項目 專業用戶： 有 N 臺雲主機，通過 Scrapy-Redis 構建分佈式爬蟲 希望集成身份認證 希望在頁面上直觀地查看所有云主機的運

>>阅读原文<<