Python爬蟲之頁面js渲染（scrapy+scrapy-splash+Docker實現）

​發現問題 前端     早些時候，筆者初學網絡爬蟲，想要作一個小爬蟲，小試牛刀。分析網頁時，用Chrome或者FireFox瀏覽器（我的推薦用FireFox，抓包效果更好）獲取網頁數據進行分析，這時數據都是很是完整的，以下圖所示：python          而後屁顛顛去寫代碼，什麼requests、urllib的各類各樣的庫，再用xpath、正則表達式、beautifulsoup去解析網頁，

>>阅读原文<<