爬蟲（七）：爬取扇貝圖書+Selenium+Phantomjs+反爬措施及其應對

文章目錄 1、反爬措施以及對應措施 1. 經過user-agent客戶端表示來判斷是否爲爬蟲 2.經過訪問頻率來判斷 3.封ip 4. 頁面的內容沒法直接獲取數據，頁面都是js代碼 2、動態html頁面的處理方法 3、selenium+phantomjs 1.瞭解 2.下載selenium 3.下載兩個插件phantomjs和Chromeedriver ①phantomjs環境變量的配置 ②安裝c

>>阅读原文<<