HtmlAgilityPack+C#做IP代理爬蟲（二）

一、查找資料並進可能多的抓取IP代理數據、並存儲IP代理池 二、從代理池中篩選數據並把有效數據添加到另一張表中，並及時更新 三、定時更新IP代理池 由於網站的IP代理地址需要實時更新，並且程序需要對數據庫中的爬蟲IP數據需要及時篩選，並插入到新表中。數據驗證一定要及時，所以程序一定要做到高併發。 1、檢測IP代理是否可用 public static void SelectIP(object ip)

>>阅读原文<<