使用代理池爬取微信文章(pyquery+requests)

在看本文之前需要了解有關代理吃維護的知識。 若不清楚如何維護代理池,可參考:https://github.com/Germey/ProxyPool 但是在用的過程中發現該方法代理池裏面的代理質量不是很好,經常會出現代理無效的情況,若大家有更好的方法,歡迎評論留言告知,感謝! ############配置文件config.py #mongodb的參數 MONGO_URL = 'localhost'
相關文章
相關標籤/搜索