【python爬蟲】使用Selenium+PhantomJS抓取動態頁面

需求 有些網站反爬蟲,會在js裏面動態操做DOM渲染頁面,執行js後的頁面纔是最終頁面。 而咱們在python中直接用requests.get()獲取到的頁面,是沒執行js的頁面,沒有咱們想要的信息。 解決方法是Selenium+PhantomJS.html Selenium - Web Browser Automation PhantomJS - a headless WebKit script
相關文章
相關標籤/搜索