Python爬蟲之爬取西刺免費IP並保存到MySQL

　　最近在學習scrapy爬蟲框架，剛開始爬取簡單網頁的圖片(妹子圖)保存到本地，之後這已經滿足不了我了，後來開始爬取大型網站，也會用selenium模擬瀏覽器操作，以及獲取ajax網頁數據，在爬取過程中，我發現偶爾會出現一些302錯誤以及操作頻繁的反爬蟲策略。所以該文就是來爬取大量免費IP來僞裝，從而達到反反爬蟲的目的。   首先建立爬蟲文件get_ips.py 導入網絡框架requests i

>>阅读原文<<