知識點講解五：處理js異步加載問題

文章目錄 前言 環境 代碼思路 原代碼 前言 在新聞網站中大多采用的是異步加載模式，新聞條目會隨滾動條的滾動而逐漸加載。當爬蟲訪問這類網站時獲得的HTML數據僅僅是咱們看到的頁面數據，只有當咱們向下滾動時，網頁的源代碼纔會同步更新。例如：騰訊新聞，處理這類JS異步加載的問題，這裏用selenium來解決。python 環境 Python 3.6.5 須要安裝的包：selenium 編譯器：subl

>>阅读原文<<