Python3.x：Selenium+PhantomJS爬取帶Ajax、Js的網頁及獲取JS返回值

前言　 現在很多網站的都大量使用JavaScript，或者使用了Ajax技術。這樣在網頁加載完成後，url雖然不改變但是網頁的DOM元素內容卻可以動態的變化。如果處理這種網頁是還用requests庫或者python自帶的urllib庫那麼得到的網頁內容和網頁在瀏覽器中顯示的內容是不一致的。 解決方案 使用Selenium+PhantomJS。這兩個組合在一起，可以運行非常強大的爬蟲，可以處理coo

>>阅读原文<<