Python搭建代理IP池（一）- 獲取 IP

使用爬蟲時，大部分網站都有必定的反爬措施，有些網站會限制每一個 IP 的訪問速度或訪問次數，超出了它的限制你的 IP 就會被封掉。對於訪問速度的處理比較簡單，只要間隔一段時間爬取一次就好了，避免頻繁訪問；而對於訪問次數，就須要使用代理 IP 來幫忙了，使用多個代理 IP 輪換着去訪問目標網址能夠有效地解決問題。html 目前網上有不少的代理服務網站提供代理服務，也提供一些免費的代理，但可用性較差，

>>阅读原文<<