Scrapy+PhantomJS+Selenium動態爬蟲

Scrapy+PhantomJS+Selenium動態爬蟲   很多網頁具有動態加載的功能,簡單的靜態頁面爬蟲對它就無能爲力了。這時候就需要PhantomJS+Selenium兩大神器,再加上Scrapy爬蟲框架,就可以拼湊成一個動態爬蟲。 PhantomJS 簡單點說PhantomJS就是一個沒有界面的瀏覽器,提供了JavaScript接口。在Windows平臺,下載好PhantomJS後,將p
相關文章
相關標籤/搜索