搭建爬蟲代理池

代理IP從何而來？ 剛自學爬蟲的時候沒有代理IP就去西刺有免費代理的網站去爬，還是有個別代理能用。當然，如果你有更好的代理接口也可以自己接入例如（億牛雲代理） 免費代理的採集也很簡單，無非就是：訪問頁面頁面 —> 正則/xpath提取 —> 保存 如何保證代理質量？ 可以肯定免費的代理IP大部分都是不能用的，不然別人爲什麼還提供付費的(不過事實是很多代理商的付費IP也不穩定，也有很多是不能用)。所

>>阅读原文<<