Scrapy框架的使用之Scrapy對接Splash

以前咱們實現了Scrapy對接Selenium抓取淘寶商品的過程，這是一種抓取JavaScript動態渲染頁面的方式。除了Selenium，Splash也能夠實現一樣的功能。本節咱們來了解Scrapy對接Splash來進行頁面抓取的方式。 html 1、準備工做 請確保Splash已經正確安裝並正常運行，同時安裝好Scrapy-Splash庫。 git 2、新建項目 首先新建一個項目，名爲scra

>>阅读原文<<