python爬蟲：scrapy-redis實現分佈式爬蟲

環境搭建 須要安裝 scrapy 和 scrapy-redispython pip install scrapy pip install scrapy-redis 安裝配置好 redis 若是是mac種用homebrew安裝的redis，配置文件路徑爲：web /usr/local/etc/redis.conf 修改配置文件redis # bind 127.0.0.0 bind 0.0.0.0 第

>>阅读原文<<