scrapy(微博)數據保存到Mongodb

1.settings.py:(配置文件) ① ②UserAgent配置放開 ③Mongo配置放開 ④Mongo配置 2.middlewares.py 中間件配置(useragent, proxy, cookies) 3.spiders(邏輯) 4.items.py 5.pipelines.py 6.debug(運行)

>>阅读原文<<