利用selenium爬取Axaj和動態網頁

前言 咱們知道python爬蟲，通常小爬蟲requests+beautifulSoup，分佈式爬蟲用Scrapy，咱們通常用requests來的方便，可是有的時候你會發現有些網頁信息（好比用戶評論），用requests是沒法獲取的，這些javascript管理的動態內容怎樣提取？ 這就引入咱們今天的主角selenium。 AJAX即「Asynchronous Javascript And XML」

>>阅读原文<<