爬數據過多經常被封IP，該怎麼辦呢 ？進來看看我的方法

繼續老套路，這兩天我爬取了豬八戒上的一些數據 網址是：http://task.zbj.com/t-ppsj/p1s5.html，可能是由於爬取的數據量有點多吧，結果我的IP被封了，需要自己手動來驗證解封ip,但這顯然阻止了我爬取更多的數據了。   下面是我寫的爬取豬八戒的被封IP的代碼 # coding=utf-8 import requests from lxml import etree d

>>阅读原文<<