Reuqests-html教程

一、概述 requests 作者開發，集成 pyppeteer。 最近爬蟲遇到的情況是，爬取的網站使用JavaScript渲染的，網站爬取的結果只有一堆JS代碼。之前遇到這種情況的處理辦法是用Splash(一般是配合Scrapy)，或者Selenium來爬取，介紹一下常用的模擬瀏覽器執行，來爬去js渲染頁面的方法。 方法 介紹 Selenium 驅動Chrome、Firefox等瀏覽器爬取 Spl

>>阅读原文<<