爬蟲抓取微信公衆號文章及閱讀點贊總結

爬蟲抓取微信公衆號文章及閱讀點贊總結   近期我司接到任務抓取省內各個大學及教育局的微信公衆號傳播力度排名,根據調研sogou微信搜索數據仍是能夠的,隨即採用python語言去進行抓取;過程當中也遇到不少問題,因爲sogou的反爬作得太噁心了老是封ip致使我須要大量的代理去抓取,這裏要感謝github上的一個代理池項目。不過目前抓來的免費代理質量都不太好,大部分都被sogou封掉了。這裏我也有買過
相關文章
相關標籤/搜索