IP代理池設置練習

首先:免費的IP,果然沒有一個好用的... 上代碼: 設置setting.py: 然後跑代碼得到如下: 懶得再去找能用的IP了 其中值得注意的是我不知道是scrapy變得更嚴謹了還是怎麼,以前是不需要加http或https前綴的,需要惡補http協議和https協議 二是request.meta 查看scrapy文檔如圖
相關文章
相關標籤/搜索