解決被西刺代理封ip的問題

網上有不少講 用 Python 爬取代理 ip 的文章,如此的文章一搜就有一堆,我自個按照相關的教程嘗試了下,確實可以抓取到不少 ip。不過在把 ip 保存到本地文件的過程當中,因爲保存的格式不美觀,我嘗試修改代碼以改變保存格式,由於在爬取的時候只設置了 Use-Agent,沒有設置 proxy,因此在屢次運行爬蟲腳本後,最後成功被西刺代理網站封掉了我真實的 ip。這下不再能訪問西刺代理的網站了…
相關文章
相關標籤/搜索