selenium爬取Ajax加載的網頁（以微博爲例）

咱們在瀏覽一些網頁的時候，鼠標滾到底，就又會加載出一些新的內容，可是請求的網址是沒有變的，這就是Ajax加載的效果。通常去爬取這種網站的時候，每每只能獲得一開始加載出來的那些內容，而要利用鼠標滾到底才能繼續加載出來的內容是得不到的，因此今天利用selenium來模擬用戶登陸微博，並模擬鼠標下拉抓取某博主的相冊。html 準備工做：安裝並配置好Python的環境，安裝了selenium和瀏覽器驅動，

>>阅读原文<<